Nachází se v horní části historického centra Portoferraio, na přírodní terase tvořené kopci, na jejichž vrcholu stojí medicejské pevnosti Stella a Falcone. Vypíná se nad vysokým útesem nad pláží Viste s krásným panoramatem otevřeného moře.Budova stojí uvnitř jedné z bašt opevněného obvodu města, která musela překonávat tu stranu, již dobře chráněnou zmíněným útesem. Oblast dostala jméno Mulini právě proto, že zde byly postaveny čtyři větrné mlýny, a to i díky vydatnému větrání, nezbytnému pro potřeby pevnosti. Když sem přišel Napoleon, už neexistovaly, protože je francouzské úřady o několik let dříve zbouraly.Napoleon se osobně postaral o vybavení a nábytek. Informován jedním ze svých věrných, že jeho sestra Elisa, La Baciocca, jak se jí v Toskánsku říkalo, uprchla z Piombina, aby se uchýlila k Muratovi, poslal muže, kteří s největší lehkostí provedli odvoz nábytku, demontáž okenic a podlah, a ironicky dokonce zanechal potvrzení o interdiktu generála Starhengerga.K dokončení vybavení jí pak pomohlo štěstí: Napoleon se dozvěděl, že na lodi, která se před bouří uchránila v zálivu Porto Longone, se nachází nábytek Camilla Borghese, slavného římského prince, manžela Pauliny Bonapartové, nyní však fakticky odloučeného, který se uchýlil do Říma. "Bah!" Napoleon si mnul ruce, "tohle všechno se z rodiny nevynáší!" "Tohle se přece nedělá!" řekl.Původní nábytek se bohužel ztratil.
