Pálffyovský palác zbudovali Valdštejnové. Od roku 1881 náležel Pálffyům. Budova byla upravena v 19. století, palác byl rozšířen o další dva domy. Za palácem je terasovitá zahrada.