در جنوب غربی میدان ابوذر و در محله اسفنجان سمنان آثار دو قلعه پر ابهت و قدیمی به چشم می خوره که به قلعه های پاچنار معروف هستند. این قلعه ها به صورت دژهای دوران باستان ساخته شده بودند و از زمره قلعه های بسیار مهم نظامی و دفاعی شهرستان به شمار می رفتند. بعضی ها قدمت و تاریخ بنای این قلعه ها رو به دوران طاهریان نسبت می دن. قلعه غربی پاچنار، بزرگ تر و وسیع تر از قلعه شرقیه. بیش از ۱۳ متر ارتفاع داره و دارای دو برج دیده بانی مدور به قطر دو متره که در دو گوشه قلعه واقع شده. قلعهٔ شرقی که در صد قدمی قلعه غربی واقع شده کوچک تر از قلعهٔ غربیه و دارای یک برج دیده بانی و نیمه ویرانه. در بنای قلعه از مصالح ساختمانی چون خشت های خام بزرگ و سنگ استفاده شده. قلعه غربی شامل دو طبقهٔ نامنظمه که با ۲۸ پله بلند و نامنظم به پشت بام راه داره. در این دژ چند خانواده سکونت دارند. بنای قلعه شرقی هم از خشت خامه و به علت احداث ساختمان دبیرستان دخترانهٔ هاجر، قسمتی از آن ویران شده و در حال حاضر کسی در آن سکونت نداره.