تشتهر منطقة عسير بوجود عدد من القلاع القديمة التي لا تزال آثارها باقية كشاهد حي يتحدث عن تاريخ هذه المنطقة وقد لعبت هذه القلاع دوراً كبيراً في التحصين والدفاع عن المنطقة. قلعة شمسان وتعتبر هذه القلعة الأشهر بين القلاع وهي تقع في الشمال من أبها تطل على الطريق العام القادم من عقبة شعار ومن عقبة الصماء وتاريخ تأسيسها يعود إلى عام 1327ه، وهي أكبر القلاع مساحة لها باب غربي كبير ومحاطة بسور وفيها أبراج للحراسة والقلعة قد طالتها يد الاهمال وبحاجة للترميم فهي تمثل جزءاً من تاريخ المنطقة وكانت مقراً لاطلاق مدفع رمضان وموقعها الجيد فوق قمة جبل شمسان يتيح لها أن تأخذ مكانتها السياحية إذا ما استثمرت بشكل صحيح. قلعة ذرة جبل ذرة يتوسط مدينة أبها وهو يطل على مدينة أبها من مختلف الاتجاهات فهو كالحارس الأمين لهذه المدينة ويطلق عليه اليوم مسمى الجبل الأخضر وهو يعتبر من أبرز معالم المدينة لارتفاعه واطلالته على المدينة وعلى سهول ووديان تهامة وأصبح عامل جذب سياحي بعد أن استثمرته الشركة الوطنية للسياحة فاستثمرت به مطعماً واستراحة لها اطلالتها الجميلة وتلفريك يتصل بأبها الجديدة حيث يمكن مشاهدة مدينة أبها ووديان تهامة.. وسهولها الخلابة. قلعة أبو خيال تقع هذه القلعة على قمة جبل أبو خيال ويقع على الحزام الدائري وتشرف بشكل مباشر على وادي ضلع.. وجبل أبو خيال كان متنزهاً تابعاً لمتنزه عسير الوطني. قلعة الدقل الدقل جبل مرتفع يقع شمال مدينة أبها.. إن هذه القلاع وغيرها من الأماكن الأثرية لتؤكد أن عسير غنية بآثارها وتراثها وهذه القلاع بحاجة إلى عناية وترميم لإبرازها لتكون عامل جذب سياحي إلى جانب مقومات السياحة الأخرى في عسير.. وقد طالب عدد من المواطنين بترميم هذه القلاع والاهتمام بها لتكون عامل جذب سياحي فهي شاهد على حضارة هذه المنطقة كما ان لموقعها الجغرافي أهمية في استثمارها سياحياً.