Burg Pyrmont, 12.yüzyılın sonlarında Kuno von Schönburg tarafından inşa edilmiştir. İlk kez 1225'ten kalma bir belgede bahsedildi. Waldbott Bassenheim ailesi 1712'de kaleyi restore etti, ancak 18.ve 19. yüzyıllarda Fransız işgali sırasında kısmen yıkıldı. Son restorasyon 1912 yılında yapıldı. Bugün Pyrmont Kalesi halka açıktır.