De vesting van het Castrum van Malvito heeft een oude oorsprong. Nieuw onderzoek zou nodig zijn om de werkelijke datum te bevestigen: aangezien in het Lombard tijdperk de stad was een bisschopszetel en gastaldato, is het mogelijk om een eerste gebouw in die periode te hypothesen.
Het oorspronkelijke castrum was echter zeker actief in de Byzantijnse periode. Later vertellen literaire bronnen dat hij behoorde tot de Normandische hertog Roberto genaamd "The Scalone", — zoon van Guiscardo en Sikelgaita, Heer van Malvito en Scalea-die mogelijk de oorspronkelijke structuur versterkt en verbeterd hebben. Oorspronkelijk was dit voorzien van twee wandgordijnen: de ene om de Akropolis te beschermen, naast de majestueuze toren en de buitenste, waarschijnlijk bedoeld om de stad te beschermen.
In het interieur worden de resten van de versterkte deur en een deel van de grensmuur, die een dikte van 120 cm bereikt, bewaard, een korte afstand van waaruit het mogelijk is om een vierkante toren te observeren die dateert van rond de IX-X eeuw.
Net opkomend uit de grond, dan, op de binnenplaats van het kasteel zijn zichtbaar de wand richels van een rechthoekig gebouw, herkenbaar met een Byzantijnse toren (misschien de centrale bewaar).
