A császári palota a város legfontosabb polgári műemléke. A 18. század első felében épült, bejárata a Piazza Grande (ma Piazza Garibaldi) felé nézett, és így hozzájárult a város alaprajzának megváltoztatásához, amely fokozatosan terjeszkedett a mai Corso XX Settembre mentén. A palota Michele Imperiali, egy genovai származású nemesember megbízásából épült, aki miután megszerezte a szomszédos Francavilla, Oria, Avetrana, majd Manduria városok hűbérbirtokait, mindegyikben saját palotát építtetett. A manduriai palotát vadászkastélynak építették, valószínűleg Mauro Manieri leccei építész tervei alapján. Kívülről nagy, háromszintes homlokzata van, amelyet egy erős erkély választ el, amelyet eredeti vaskorlát vesz körül. A homlokzat sarkain két címer látható, amelyeket kartusokkal keretezett kartusok kereteznek, amelyeken a császári családok heraldikai címerei láthatók. A palota belsejében jellegzetes átrium található, ahol a császári herceg a meleg nyári estéken vendégeket szokott fogadni.