Zámek, který dominuje městské zástavbě, byl postaven v letech 1590 až 1606 pod vedením Wolfa Rumpfa, pravděpodobně podle původního návrhu císařského architekta Pietra Ferrabosca, na místě starého městského hradu rodu Kuenringů.

Stavebním mistrem byl „mistr Anton“ z Vídně. Svou dnešní podobu se čtyřmi štíty na bočních stranách získalo toto bývalé panské sídlo po požáru v roce 1757, při kterém shořela i vysoká cibulovitá věž.