Historické prameny zmiňují rok 1398, kdy bratři Beneš, Vaněk a Čeněk z Deblína zapsali Janovi ze Zbraslavce dvůr Dvořec. S lokalitou je možné zřejmě spojit i zápis z roku 1415, kdy Blažek z Dambořic převádí bratrům z Bukovic Lubě s dvorem a dvorem pustým.

(Zdroj: M.Plaček)

Tvrz založena patrně již ve 14. stol. Ležela na sporném území mezi biskupstvím, klášterem Hradisko a zbožím pánů ze Šternberka, kteří se nakonec Dvorecka zmocnili, na ochranu okolních rudných dolů a staré cesty z Olomouce do Slezska. Tvrz dvorecká s mlýnem o dvou kolech se uvádí v urbáři panství šternberského r. 1599 a později jako panský dům. R.1664 se již uvádí pustá tvrz. Nezachovaly se z ní žádné pozůstatky a ani se neví, kde stála.