Kastellet on väike linnus, mis asub kastellholmeni saarel. Esimene linnus asukoha ehitati 1667 kujundas Erik Dahlbergh. See plahvatas 1845. aasta juunis ja hiljem ehitati uus 1846-1848 arhitekt Fredrik Blomi kujundusele. See koosneb punastest tellistest seintega ümmargusest tornist ja 20 meetri kõrgusest trepist tornist. Peal lendab Rootsi sõjaväeline lipnik, seda heisatakse ja langetatakse iga päev, mis näitab, et rahvas on rahus. 17. mail 1996, Norra põhiseaduse päeval, heiskasid mõned Norra väljarännanud Norra lipu torni. Kuigi sellist tegevust oleks Ajalooliselt võetud kui sõja väljakuulutamist, oleks diplomaatilist kriisi võimalik vältida.