Mlýn existoval v Sazené zřejmě daleko dříve než zámek. Za Gryspeků byl přestavěn v renesančním slohu a později došlo k jeho barokisaci. Renesanční ostění a barokní mansardová střecha jsou jeho nejvýraznějšími slohovými znaky.
Nad vchodem je umístěn znak panenského řádu sv. Norberta s berlou a infulí v barokové kartuši s letopočtem 1762 a nápisem IVWAD (iniciály opata doksanského kláštera), daný sem za panství doksanského kláštera.