Blizu Piazza Sant'oronzo stoji dvorac Lecce, također poznata kao zamak Charles V, od danas se cini da je za ono što je zahvaljujući će od Habsburg cara. Kralj je 1539.pretvorio srednjevjekovni bedem u pravu vojnu tvrđavu, koja je mogla izdržati oštre napade Turaka. Da bi to neprobojna bila je inspiracija za Gian Giacomo Del'acaja, glavni inžinjer Kraljevstva od Napulja. Od 2010. je bio u Muzeju Perestinih papira.