Zábřeh jako město měl opevnění v podobě hradeb. Jejich zbytky je možné vidět za zámkemv pohledu z Havlíčkovy ulice, a částečně i v zahradách domů směrem do ulice Zahradní. Původní hradby vedly od zámku po úbočí svahu k faře a Dolní bráně stála někde v místech staré pošty, pokračovaly Zahradní ulicí k Horní bráně v místě kde stojí dům č. 5 v Komenského ulici, dále ztracenou uličkou zahradami zpět k zámku. Městské hradby byly zbourány v roce 1829.