Muzeum hrnčířství a galerie se nachází v budově renesančního panského domu, který v roce 1613 daroval Albrecht Smiřický obci. Před rokem 1668 sídlila v domě radnice. Mnoho historických dokumentů bylo zničeno čtyřmi požáry, které zachvátily budovu. Při poslední rekonstrukci bylo obnoveno původní loubí.