Дворецът е построен между 1637 и 1639 г. от Козимо Фанцаго по искане на фламандското семейство Зевалос, което искало да има благороден дворец на улица Толедо. Вътре в сградата обаче, веднага щом се премине през входната врата, вдясно се вижда благородническият герб на фамилията Колона с кратка мраморна гравюра, посветена на тях. Гербът е същият като този над главната врата, което предполага, че тези две части са добавени едва по-късно.С течение на годините дворецът сменя собствениците си и едва през 1920 г., след почти един век, отново става един. Новият собственик е Banca Commerciale.Дворецът може да бъде посетен като аристократичен апартамент, а също така в него има художествена галерия с около 120 картини и скулптури.Истински музей с ново оформление, в който са представени повече от 120 творби, с много шедьоври, свързани с град Неапол от XVII до началото на XX век. Не само великолепното "Мъченичество на Света Урсула" на Караваджо, или по-скоро на последния Караваджо, но и много други шедьоври. Мъченичеството" е последната картина на великия майстор, преди да напусне град Неапол през 1610 г., само няколко седмици след драматичната си смърт. Картината е поръчана от генуезкия банкер Маркантонио Дория, чието семейство има за покровителка Света Урсула, и е изпълнена от Караваджо в кратък срок именно защото той е на път да напусне Неапол.
