O Castelo de Levanto é referido por nomes diferentes (Castelo de San Giorgio, Castelo de Monale, Castelo da Malaspina), mas não se deve confundir este poderoso edifício no topo de uma colina a sul da cidade velha com outras construções. O castelo que hoje podemos ver é uma reconstrução do século XVI de uma antiga casa senhorial do século XII. Foi utilizada ao longo dos séculos como fortaleza, sede da capitania de Levanto e prisão; actualmente é propriedade privada e só está aberta a visitantes em ocasiões especiais. Tem uma forma quadrangular e uma torre circular; de acordo com as lendas locais, está ligada por passagens subterrâneas à praia abaixo e à Igreja dos Annunziata.