Přestože zámek prošel četnými opravami a přestavbami, ani to ho nezachránilo. V roce 1892 byl bez jediného pozůstatku a památky zcela zbořen. Na jeho místě, bylo postaveno novorenesanční Slezské zemské muzeum. Na památku zaniklého zámku tu dnes zůstávají jen vybledlé staré veduty a dům správce, tzv. Müllerův dům. Ten postavili v barokním slohu na místě zasypaného hradního příkopu.