Το Burg Pyrmont χτίστηκε στα τέλη του 12ου αιώνα από τον Kuno von Schönburg. Αναφέρθηκε για πρώτη φορά σε έγγραφο που χρονολογείται από το 1225. Η οικογένεια Waldbott Bassenheim αποκατέστησε το κάστρο το 1712, αλλά κατεδαφίστηκε εν μέρει κατά τη διάρκεια της γαλλικής κατοχής τον 18ο και 19ο αιώνα. Η τελευταία αποκατάσταση έγινε το 1912. Σήμερα το κάστρο Pyrmont είναι ανοιχτό στο κοινό.