Pałac został wzniesiony w latach 1579-1587. Na początku był to budynek jednopiętrowy lecz po wielu przebudowach znacznie się powiększył i zyskał drugie piętro. W XVIII w. w jego wnętrzu wykonane zostało bogate wyposażenie malarsko-rzeźbiarskie, a następnie zostały dobudowane kolejne elementy. Na początku tego wieku obiekt przejęło wojsko i został on przystosowany do warunków szpitalnych. W 2005 r. przed budynkiem odsłonięto pomnik Jana Zamoyskiego - hetmana. Postać siedzi na koniu ustawionym na cokole.