Бург Пірмонт быў пабудаваны ў канцы 12 стагоддзя Куна фон Шэнбургам. Упершыню ён згадваецца ў дакуменце, датаваным 1225 годам. Сям'я уолдботт Бассенхайм аднавіла замак у 1712 годзе, але ён быў часткова разбураны падчас французскай акупацыі ў 18-19 стагоддзях. Апошняя рэстаўрацыя была праведзена ў 1912 годзе. Сёння пірманцкі замак адкрыты для публікі.