Ang Imperial Palace ay ang pinakamahalagang sibil na monumento sa lungsod. Ito ay itinayo noong unang kalahati ng ika-18 siglo, na may pasukan na nakaharap sa Piazza Grande (ngayon ay Piazza Garibaldi) at sa gayon ay nag-ambag sa pagbabago ng pagpaplano ng lunsod ng lungsod na unti-unting lumawak sa kahabaan ng kasalukuyang Corso XX Settembre. Ang palasyo ay itinayo sa utos ni Michele Imperiali, isang maharlika na may pinagmulang Genoese, na, pagkatapos na bilhin ang mga fiefdom ng mga kalapit na lungsod ng Francavilla, Oria, Avetrana at, samakatuwid, Manduria, ay nagkaroon ng sariling palasyo na itinayo sa bawat isa sa mga sentrong ito. Ang isa sa Manduria ay itinayo bilang isang hunting lodge, malamang na batay sa isang proyekto ng arkitekto ng Leccese na si Mauro Manieri. Sa labas, mayroon itong malaking façade na may tatlong palapag, na pinaghihiwalay ng isang matibay na balkonahe na napapalibutan din ng orihinal na rehas na bakal. Sa mga sulok ng harapan ay may dalawang coat of arm na naka-frame sa pamamagitan ng cartouches na may heraldic arms ng mga pamilyang Imperial. Nagtatampok ang loob ng palasyo ng isang katangiang atrium, kung saan ang Imperial prince ay dating nagbibigay-aliw sa mga bisita sa mainit na gabi ng tag-init.