Tvrz je připomínána už v roce 1359, kdy byla sídlem Smrčků z Mnichu. Roku 1588 přestavěna Petrem ze Žirovnice a poté v roce 1768 upravena na pozdně barokní faru.