Emile Duclaux trädgård som omger Palais du Pharo kännetecknas av en fantastisk utsikt över Vieux Port och Marseille norra kust. En stig vid en klippa ger vandrare möjlighet att upptäcka fantastiska vyer. Platsen är idealisk för att observera processionen av färjor som lämnar "Vieux Port", en verklig inbjudan till resor. Under sin vistelse i Marseille 1852 blev Louis Napoleon förförd av området och uttryckte en önskan om att äga en bostad där med fötterna i vattnet. Den 15 augusti 1858 lades första stenen till palatset.