Krásný komplex Saue Manor je jedním z nejlepších příkladů estonské rané klasicistní architektury. Prvním známým majitelem panství Saue byl Remmert von Scharenberg z Westfaalu, který získal právo na investice od dánské královny Markéty. Před přesunem do Saue byl budoucí majitel panství v letech 1528 - 1532 soudním vykonavatelem Narvy a v letech 1534 - 1549 zastával funkci v tallinnském velitelství. Kromě svého majetku v zemi vlastnil také několik domů ve městě Tallinn. Byl pohřben v kostele sv. Mikuláše (Niguliste) v roce 1549.
Panství získal Friedrich von Fersen v roce 1774. Současný zámek spolu se stodolou a kočárovým domem klenutým kolem jeho předního náměstí byl dokončen v roce 1792. Kvůli hypotéce v roce 1792 byl von Fersen nucen vzdát se vlastnictví panství majiteli Saku Manor, princi Friedrichovi von Rehnbinderovi a jeho manželce princezně Gertrudě. Noví majitelé se nastěhovali a v roce 1794 se jim v Saue narodil druhý syn, stejně jako jejich další děti. I když děti měly v Saku postavenou novou hlavní budovu ve stylu Petrohradu, starý pár raději zůstal v Saue.
Po válce za nezávislost v roce 1918, kdy Straelborns odešel do Německa a prodal panství Estonské republice. Republika ji dala spolu s 50 hektary půdy hrdinovi války za nezávislost Johannesovi Ermovi. Bohužel, jeho život byl krátký a od roku 1925 bylo panství ponecháno jeho manželce a rodině.
Během ruské okupace panství několikrát změnilo obyvatele. Fungovala jako domov pro seniory, nemocnice pro chronicky nemocné, strojní a traktorová stanice, kancelář estonských zemědělských strojů, Mateřská škola, městská rada Saue a kanceláře a výrobní místnosti firmy SAUREM, patřící do městské rady Saue. V roce 1995 bylo panství vráceno dceři Johannes Erm, Missis Elga Viilup, která jej následně prodala rodině Kriisa.
