El Turó ha estat habitat des de el cinquè mil·lenni abans de crist.els habitants de l'antiga Petovion van construir una fortalesa i santuaris de la muntanya, i en l'Alta Edat Mitjana hi havia un Eslaus lloc d'enterrament. La fortificació medieval que data del segle XI, quan el castell i la ciutat eren propietat de l'Arquebisbat de Salzburg. Els Papes van donar el castell dels Senyors de Ptuj, que va fundar la república Dominicana i minoritàries, monestirs i construït el santuari de Ptujska Gora durant els seus tres-cents anys d'estada a Ptuj. La làpida de l'últim Senyor de Ptuj, Frederic IX, està construït a la planta baixa del castell. Entre 1656 i el 1802, els Comtes de Leslie vivien en el castell. Els últims propietaris, els comtes de Herberstein, propietat del castell entre el 1873 i 1945, quan va ser nacionalitzada i annex al Museu de Ptuj amb la seva rica decoració. Avui, Ptuj Castell cases més visitats i representativa de les col·leccions de la Ptuj-Ormož Museu comarcal: armes, instruments musicals, tradicionals màscares, una col·lecció d'feudal residencial cultura, vidre, pintures i el castell de la galeria.
