کاخ سرخه حصار که به نام کاخ یاقوت هم خوانده می شود، از ساختمان هایی است که در اواخر قرن 13 و زمان ناصرالدین شاه یعنی سال های 1302 و 1303 هجری قمری در محل سرخه حصار ساخته شد. این کاخ سلطنتی شامل 2 دستگاه عمارت به نام کوشک بیرونی و حرم خانه بود و در مجموع در حدود 200 اتاق داشت.

گذشته از بناهای سلطنتی قلعه، ساختمان های دیگری به نام کاروانسرا، سربازخانه و گرمابه هم از دیگر ملزومات کاخ سرخه حصار محسوب می شد که امروزه اثری از آن ها دیده نمی شود. در حال حاضر، قسمتی از این محل به تاسیسات بهداشتی کارگران اختصاص داده شده است.