Na místě zámku stála původně tvrz s hospodářskými budovami, která se rozrostla v průběhu 16. století. Dnešní dispozice zámku – čtyřkřídlá budova kolem obdélného nádvoří s hranolovým přístavkem na východě – vznikla asi už po polovině 16. století. Prostor jižně u zámku byl rámován hospodářskými budovami: na východě vinopalnou, na jihu dlouhým stavením sýpky, na západě kancelářemi.

Současnou podobu dvoupatrové budovy s nádvorními arkádami získal zámek nejspíš v 1. třetině 17. století. Od poloviny toho století už prameny mluví o "zámku", nikoliv o tvrzi. Umělecky nejzávažnější úpravy byly provedeny kolem r. 1700 za Šternberků. Zámek dostal nový hlavní portál, směrem k západu byla postavena protáhlá budova, uzavírající prostor dvora, s mohutným portálem zdobeným volutami. Do nároží mezi touto budovou a kancelářským křídlem pak vsazena zámecká kaple.