Wzniesiony przez bpa Henryka Firleja w XVII w stanowi wyjątkowy w skali kraju przykład siedziby magnackiej i fortalicium w typie palazzo in fortezza. To kluczowy element kompozycji urbanistycznej i krajobrazu kulturowego Czemiernik.