Budova zámku byla postavená kolem roku 1600 na místě, kde dříve stávala středověká tvrz. Budova byla přestavěná barokně koncem 17. století a dále upravená roku 1910. První zmínka o  Loukovci pochází z roku 1225, kdy byl zámek ve vlastnictví křižovníků sv. Jana v Praze, v jejichž majetku zůstal až do husitských válek. Dalšími majiteli byli Kryštof Šof z Helfenburka, Petr Zvířetický z Vartemberka, Václav Litovský ze Svinař a Berkové z Dubé. Tvrz zde postavili zřejmě už pánové z Helfenburka. Od roku 1624 patřil Loukovec k frýdlantskému vévodství Albrechta Václava Eusebia z Valdštejna, pak byl darován hrabatům z Bredy, od roku 1700 patřil hrabatům Morzinům a nakonec byl přikoupen ke Svijanům Marií Markétou z Valdštejna. Větší stavební práce zde pak proběhly až v roce 1910, hlavně opravy interiérů. V současnosti jsou zde kanceláře místního zemědělského družstva.