أمر جلالة الملك عبد العزيز طيب الله ثراه ببناء القصر في شهر صفر عام 1350 ه بعد أن وقف على الأرض المقترحة، وبدأ تخطيط القصر بِرِجْلِهِ محددا البوابة الرسمية والأبراج الأربعة (المقاصير)، كما أمر بحفر قاعدة السور بعمق متر واستمر بناء القصر حتى شهر ربيع الثاني من عام 1351 ه وكان عدد العمال الذين اشتركوا في بنائه نحو 120 عاملا ويتكون القصر من عدد من المباني، منها ما كان بناؤه قديماً من أصل القصر، ومنها ما أحدث بناؤه بعد حين وذلك للحاجة إليه، وهي كما يلي: المجلس الملكي: أو ما يسمى ب (الرّوشن) وهو المكان الذي يجلس فيه الملك عبد العزيز للاستقبال، وتصريف الأمور، ويقال: إن هذا المجلس حدده الملك بنفسه عند التخطيط الأولي للقصر، ويقع فوق البوابة الرئيسة التي من الجهة الشمالية، أما المسجد فهو على يمين الداخل مع البوابة الرئيسة، ويقال كذلك إن الملك عبدالعزيز هو الذي حدد مكانه قبل البناء، وقد أنجز بناؤه في ذي القعدة عام 1350 ه وصلى فيه الملك عبدالعزيز وهو في طريقه ذاهباً للحج، وديوانية القهوة وتقع على يمين الداخل من الباب الرئيس، وهي مكان إعداد القهوة للملك عبدالعزيز من قبل القهوجية، والورش: وتقع في غربي المسجد، وليست ببناء، وإنما هي ساحة أو (حوش) أما السجن فكان في بداية بناء القصر عبارة عن حجرة تقع على يسار الداخل من البوابة الشمالية، ثم أحدث بعد ذلك بسنوات مبنى آخر للسجن، يتكون من عدد من الغرف، ويقع في الجهة الجنوبية الشرقية بجوار المدخل الشرقي، وبجانبه غرفة لحارس السجن، وسكن الأخويا وموظفي البرقية: ويحتل الجهة الجنوبية من القصر، ويتكون من عدد من الغرف، وهو ملتصق بالسور الجنوبي، وهو من المباني التي أحدثت والبئر: وتقع في الجهة الجنوبية الشرقية، غربي السجن الجديد ومحطة البنزين: وتقع في الجهة الجنوبية الغربية، ولم تكن مع بناء القصر وإنما أحدثت عام 1363 ه، وعند إحداثها فُتح للقصر بوابتان اثنتان متقابلتان، إحداهما من الجهة الغربية والأخرى من الجهة الشرقية، وذلك تسهيلاً لدخول السيارات وخروجها من القصر ومكتب المحطة: وهو مكان موظفي محطة البنزين، ويقع على يسار الداخل من البوابة الغربية وهو من المباني المحدثة ومكتب تسجيل السيارات: ومهمة هذا المكتب تسجيل السيارات التي تدخل القصر لتعبئة الوقود، ويقع هذا المكتب على يمين الداخل من البوابة الغربية، والغالب ألا يكون في هذا المكتب إلا موظف واحد فقط، وهو من المباني المحدثة وسكن الشرطة: ويقع فوق مستودعات الأطعمة، على يسار الداخل من البوابة الرئيسة الشمالية وأعمدة البرقية اللاسلكية: وإن لم تكن من المباني ولكن نذكرها هنا لأهميتها، وهما عبارة عن عمودين اثنين يقعان غرب البئر المقاصير: وهي أبراج أربعة في زوايا القصر الأربع، وقد كان بناؤها مع بناء القصر الأولي كما يوجد في القصر عدد من الغرف الحديثة الأخرى.