O palácio foi construído entre 1637 e 1639 por Cosimo Fanzago a mando da família flamenga Zevallos, que queria um palácio nobre na Via Toledo para eles. No interior do edifício, no entanto, assim que se passa pela porta de entrada, pode-se ver à direita o nobre brasão de armas da família Colonna com uma pequena gravura de mármore dedicada a eles. O brasão é o mesmo que o acima da porta principal, sugerindo que estas duas partes só foram acrescentadas mais tarde.Com o passar dos anos, o palácio mudou de mãos e só em 1920 é que se tornou novamente um, após quase um século. O novo proprietário era o Banca Commerciale.O palácio pode ser visitado como um apartamento aristocrático e tem também uma galeria de arte com cerca de 120 pinturas e esculturas.Um verdadeiro museu com um novo layout com mais de 120 obras, com muitas obras-primas relacionadas com a cidade de Nápoles desde o século XVII até ao início do século XX. Não só o esplêndido Martírio de Santa Úrsula de Caravaggio, de facto o último Caravaggio, mas também muitas outras obras-primas. O 'Martírio' foi o último quadro do grande mestre antes de deixar a cidade de Nápoles em 1610, apenas algumas semanas após a sua dramática morte. O quadro foi encomendado pelo banqueiro genovês Marcantonio Doria, cuja família tinha Santa Úrsula como sua padroeira, e foi executado por Caravaggio num curto espaço de tempo precisamente porque ele estava prestes a fugir de Nápoles.