Het paleis werd tussen 1637 en 1639 gebouwd door Cosimo Fanzago in opdracht van de Vlaamse familie Zevallos, die voor hen een adellijk paleis aan de Via Toledo wilde. Binnen in het gebouw ziet men echter, zodra men door de toegangsdeur gaat, rechts het adellijke wapen van de familie Colonna met een korte marmeren gravure die aan hen is gewijd. Het wapen is hetzelfde als dat boven de hoofddeur, wat doet vermoeden dat deze twee delen pas later zijn toegevoegd.In de loop der jaren veranderde het paleis van eigenaar en pas in 1920 werd het na bijna een eeuw weer één geheel. De nieuwe eigenaar was de Banca Commerciale.Het paleis kan worden bezocht als aristocratische flat en heeft ook een kunstgalerij met ongeveer 120 schilderijen en beeldhouwwerken.Een waar museum met een nieuwe inrichting met meer dan 120 werken, met veel meesterwerken die betrekking hebben op de stad Napels van de 17e eeuw tot het begin van de 20e eeuw. Niet alleen Caravaggio's prachtige Martelaarschap van de heilige Ursula, inderdaad de laatste Caravaggio, maar ook vele andere meesterwerken. Het 'Martelaarschap' was het laatste schilderij van de grote meester voordat hij in 1610 de stad Napels verliet, slechts enkele weken na zijn dramatische dood. Het schilderij werd gemaakt in opdracht van de Genuese bankier Marcantonio Doria, wiens familie de heilige Ursula als patroonheilige had, en werd door Caravaggio in korte tijd uitgevoerd, juist omdat hij op het punt stond Napels te ontvluchten.