Panská rybárna se nachází ve středu obce u silnice. Vznikla v místě bývalé vodní tvrze ze 16. století. Rozkládá se na půdorysu písmene U, přičemž hlavní křídlo tvoří uliční průčelí, k němuž přiléhají dvě nestejně dlouhé budovy dvorního traktu. Vstupní křídlo s reprezentačními místnosti a s arkádami směrem do nádvoří je kryto vysokou sedlovou střechou s půlvalbami nad bočními štíty, křídla směrem do dvora jsou zastřešena sedlovou střechou. Rybárna vykazuje řadu shodných stavebních detailů s mlýnem ve Slupi.