Kostel ve Skramníkách byl farní již ve 14. století. Několikrát byl vyloupen a vypálen. Protože však hrozilo zřícení, byl r. 1906 kompletně rozbořen. Nový kostel byl vystaven dle původní stavby. U jižního vchodu do kostela je náhrobek rytíře Vilíma Blanického z Blanice a na Cerhenk&aacu...
Na místě stál původně od 3. čtvrtiny 13. století klášter (založený současně s městem), vypálený husity roku 1421. V letech 1437 - 1438 zde byl postaven hrad pro Bedřicha ze Strážnice a ten po roce 1556 změněn v renesanční zámek. Několikrát upravován.
Z původní čtyřkřídlé budovy zachována jen západní část se schodištěm a hřebínkovými klenbami, na fasádě sgrafita. Z hradu zachována brána se 2 zazdě...