Le Castello di Lettere a été construit par le duché d'Amalfi au Xe siècle pour défendre ses frontières nord et faisait partie d'un réseau de fortifications qui assurait aux Amalfiens le contrôle des deux côtés des montagnes de Lattari. Le site, en effet, jouit encore d'une splendide position panoramique qui permettait de contrôler la zone depuis le port de Castellammare jusqu'à l'embouchure du fleuve Sarno et tout le golfe de Naples, mais aussi la vallée du Sarno dominée par le Vésuve et les montagnes du Sarno jusqu'à Pagani.
Depuis sa fondation, le château a eu la forme d'un village fortifié avec des maisons à plusieurs étages, comme nous l'indiquent des documents datant de 1030 et 1033. La construction de la forteresse, que nous appelons aujourd'hui le château, est probablement liée à l'installation d'un seigneur féodal qui l'a construite comme lieu de résidence à l'intérieur des murs et comme symbole de son pouvoir. Le bâtiment a une forme trapézoïdale et conserve quatre tours, dont la plus haute sert de donjon. A l'intérieur des murs a également été construite une cathédrale, siège depuis 987 d'un évêché. Au XIIe siècle, le beau clocher décoré d'incrustations de tuf gris et de grès jaune formant des étoiles, des croix et des losanges a été ajouté à ce premier bâtiment.
À l'intérieur de la Torre del Grano, ainsi appelée parce qu'elle servait à l'origine de zone de stockage, le musée du parc archéologique du Castello di Lettere est actuellement en cours d'installation pour abriter les pièces découvertes lors des campagnes de fouilles menées depuis 2007, telles que des céramiques, des objets en bronze et de nombreux ossements d'animaux. Les expositions illustrent non seulement la nourriture et le régime alimentaire du village entre le Xe et le XVIe siècle, mais mettent également en évidence le réseau commercial méditerranéen dans lequel s'est inséré Lettere grâce aux routes empruntées par le peuple amalfitain, avec des conteneurs de transport et des céramiques émaillées provenant d'Afrique du Nord, d'Espagne et de Sicile.