این بنای معتبر و مستحکم که به دژ برازجان یا کاروانسرای مشیرالملک برازجان بزرگ معروف است، در مقابل میدان اصلی شهر برازجان قراردارد، که از ابینه باشکوه دورهٔ قاجاریه به شمار می‌رود و در سال ۱۲۸۸ قمری مطابق با سال ۱۲۵۰ شمسی بنا به دستور یکی از نیکوکاران شیراز به نام حاج میرزا ابوالحسن خان مشیرالملک شیرازی با هزینه‌ای معادل چهل هزار تومان به پول آن زمان و با معماری استادانه مرحوم حاج محمد شیرازی ساخته شده‌است. این دژ تا مدت‌های مدیدی به عنوان زندان مورد استفاده قرار می‌گرفته‌است. این دژ در اصل کاروانسرایی از دورهٔ قاجاریه است. در سال ۱۳۶۲ به شماره ۱۶۳۸ به عنوان یک اثر ملی به ثبت رسیده‌است. این دژ دارای سنگرهای دیدبانی می‌باشد که در مرکز شهر و برای مقابله دشمنان به شهر ساخته شده بود.
