La llegenda explica que una Dama Blanca va ser llançada pel seu malvat marit des de les parets d'un antic castell. Però el cel es va apiadar d'ella i li va donar un cos de roca abans que es trenqués a les roques. Es diu que la seva ànima encara hi és, en un penya-segat que domina la badia, prop de les restes de l'antiga casa pairal de Duino, i que algunes nits cobra vida i vaga sense pau.L'edifici té l'aspecte d'una construcció composta i massiva: sobretot destaca la torre del segle XVI que conserva intacta la seva estructura bimilenària; és al voltant d'aquesta torre, sobre les ruïnes d'una avançada romana, que l'any 1300 es va emprendre la construcció de l'actual castell, no lluny de l'antic.A partir del 1600 sota els comtes de Thurn Hoffer Valsassina, el Castell va agafar progressivament la connotació de pol humanístic que encara manté avui dia. Es poden visitar 15 sales perfectament moblades, plenes de testimonis que expliquen la llarga història de la família dels Prínceps della Torre i Tasso, el llinatge dels quals està vinculat als serveis postals europeus des del 1400. L'itinerari de la visita, que dura aproximadament un hora i mitja , dóna pas per admirar a més del preuat mobiliari nombrosos documents històrics, cartes originals, fotos familiars i gravats d'època; destaca el piano de Liszt. Una obra mestra de l'arquitectura és l'escala de Palladio.La panoràmica que es pot gaudir des del cim de la torre, que va des del Carso fins al mar a tres-cents seixanta graus, és realment suggerent, mentre que l'ambient a la capella familiar és molt particular. Travessant el parc podem apreciar la rica varietat de flora mediterrània: alzines, teixos, oliveres, xiprers i nombroses cascades de flors de colors que acoloreixen i perfumen les avingudes del Castell. El Castle Bunker té una superfície de 400 m2 i una profunditat de 18 m.