O castelo foi encomendado no século XV por Sigismondo Pandolfo Malatesta e resta apenas o núcleo central. O edifício foi concebido como um palácio e uma fortaleza como uma sede digna da corte e da guarnição, e como um símbolo de poder e supremacia sobre a cidade.
Este fascinante edifício tem grandes torres quadradas e poderosas paredes inclinadas cujo efeito original, subindo do fosso profundo, deve ter sido formidável. Situado na parede entre o brasão de armas e o portal de mármore é uma das epígrafes dedicatórias do castelo com um texto solene em latim esculpido em caracteres lapidários (um dos primeiros exemplos do "Renascimento" das personagens clássicas).
Agora o castelo, também conhecido como "Rocca Malatestiana", está dividido em quatro partes ligadas umas às outras: Ala Isotta, o corpo central de serviços, o grande pátio e o Maschio, a parte mais encantadora de todo o complexo. A sua estrutura foi submetida a uma cuidadosa e precisa restauração com o objectivo de a tornar um local permanentemente visitável e um local de prestígio para eventos artísticos e culturais. Em 2017, começaram os trabalhos de construção do Tribunal no mar, incluindo a recuperação do perímetro do antigo fosso e das paredes com a escadaria de ligação à nova Piazza Arena Francesca da Rimini.