کاروانسرای برازجان بنای بلند و محکمیه که در میان مردم محل به دژ معروفه. بنا مربوط به دوره قاجاریه می شه ولی معماریش به سبک معماری زندیه است. تا مدت های طولانی به عنوان زندان مورد استفاده قرار می گرفته و مهندس مهدی بازرگان هم در این دژ زندانی بوده. این بنا جزو آثار ملی ایران به ثبت رسیده.