ഈ സൈറ്റിലെ ആദ്യത്തെ കാസിൽ, ഒരു നോർമൻ മൊട്ട, ബെയ്ലി കോട്ട, 1148 ൽ ബിഗോഡ് കുടുംബത്തിന്റെ ഉടമസ്ഥതയിലായി. 1174 ൽ ഇംഗ്ലണ്ടിലെ ഹെൻറി രണ്ടാമൻ രാജാവ് ഹ്യൂ ബിഗോഡ് എന്ന നോർഫോക്കിലെ 1 ആം ഏൾ ആയ ഹ്യൂ ബിഗോഡ് രാജാവിനെ തകർക്കാൻ ലഹളയിൽ ചേർന്നതിനാൽ ഇത് നശിപ്പിക്കപ്പെട്ടു. 1189-ൽ ഇംഗ്ലണ്ടിലെ റിച്ചാർഡ് ഒന്നാമനും ഹ്യൂബിന്റെ മകൻ റോജറും നോർഫോക്കിലെ 2-ആം ഏൾ ആയ റോജർ രാജകുടുംബാംഗമായിരുന്നു. തുടർന്ന് 1213-ൽ പൂർത്തിയായ ഈ കൊട്ടാരം നിർമ്മിച്ചു. ഫ്രെയിംലിംഹാം കാസിൽ കേന്ദ്ര സൂക്ഷിക്കാതിരിക്കാനുള്ള സമയം അസാധാരണമായിരുന്നു, പകരം ഒരു കർട്ടൻ മതിൽ ഉപയോഗിച്ച് 13 ചുള ഗോപുരങ്ങൾ അകത്തെ കോട്ടയെ പ്രതിരോധിക്കാൻ. 1215-ലെ ഒന്നാം ബാറോൺസ് യുദ്ധത്തിൽ റോജർ, ജോൺ രാജാവിന്റെ ഭരണത്തെ എതിർക്കുന്ന വിമതബാരൻ സംഘത്തോടൊപ്പം ചേർന്നു. 1216-ൽ ബ്രിട്ടീഷുകാർ ഈ കോട്ട പിടിച്ചടക്കി. ഏതാനും വര്ഷങ്ങള്ക്കുശേഷം കാസര്കോട് കോട്ടയില് തിരിച്ചെത്തി. 1270-ൽ നോർഫോക്കിലെ 5-ആം ഏൾ, ഒരു റോജർ ബിഗോഡ് കോട്ടയ്ക്ക് പാരമ്പര്യമായി കൈമാറുകയും അവിടെ വിപുലമായ പുനരുദ്ധാരണം നടത്തുകയും ചെയ്തു. കിൽ, റോജർ ഫ്രഞ്ച് യുദ്ധങ്ങൾ അധിക നികുതികളും പിന്തുണയ്ക്കായി എഡ്വേർഡ് ഒന്നാമൻ അഭ്യർത്ഥന നേരെ ബാർ മാനിറ്റോണിയൻ എതിർപ്പ് നയി റോറിന്റെ ഭൂമി പിടിച്ചെടുത്ത് റോർ അവരെ മരണത്തിനു ശേഷം കിരീടത്തിന് വിട്ടുകൊടുത്തു. 1306-ൽ ഫ്രെയിംലിങ്ഹാം കോട്ടയുടെ കിരീടത്തിലേക്ക് പ്രവേശിക്കുകയും ചെയ്തു. 13 - ാ ം നൂറ്റാണ്ടിന്റെ അവസാനത്തോടെ കോട്ടയില് ഒരു വലിയ ജയില് നിര്മ്മിക്കപ്പെട്ടു. 14-ആം നൂറ്റാണ്ടിൽ ഫ്രെയിംലിങ്ഹാം കോട്ട നോർഫോക്കിലെ ബ്രാണ്ടൺ തോമസിന് നൽകപ്പെട്ടു. പിന്നീട് ഈ കോട്ട സഫോൾക്കിലെ ഇയർഫോർഡ് കുടുംബത്തിലേക്കും പിന്നീട് നോർഫോക്കിലെ ഡ്യൂക്ക് തോമസ് ഡി മൗബ്രെയിലേക്കും കടന്നു. 15 - ാ ം നൂറ്റാണ്ടുവരെ മൗറിംഹാം കോട്ടയുടെ പ്രധാന ആസ്ഥാനമായി മൗബ്രേയ്സ് ഉപയോഗിച്ചിരുന്നു. 1476-ൽ ഈ കൊട്ടാരം നോർഫോക്ക് ഡ്യൂക്ക് ജോൺ ഹോവാർഡ് എന്ന സ്ഥാനപ്പേര് നേടി. ഈ കോട്ടയുടെ കീഴിലാണ് കൂടുതൽ ആധുനികവൽക്കരിക്കപ്പെട്ടതും ആധുനികവുമായ ഇഷ്ടികയായി ഉപയോഗിക്കപ്പെട്ടതും. 1485-ൽ, റോസാപ്പൂക്കളുടെ യുദ്ധങ്ങൾ അവസാനിച്ചപ്പോൾ, ഫ്രെയിംലിങ്ഹാം കോട്ട കിരീടത്താൽ പിടിച്ചെടുക്കുകയും, 1513-ൽ നോർഫോക്കിലെ 2 - ാ മത് ഡ്യൂക്ക് ആയ തോമസ് ഹോവാർഡിലേക്ക് തിരിച്ചയയ്ക്കുകയും ചെയ്തു. തോമസ് റിട്ടയർമെന്റ് ഇവിടെ ചെലവഴിച്ചു, അക്കാലത്ത് ഈ കോട്ട ഒരു ആഡംബര രീതിയിൽ അലങ്കരിക്കപ്പെട്ടു. നോർഫോക്ക് 3 ഡി ഡ്യൂക്ക് തോമസ് എന്നും അറിയപ്പെടുന്നു, കോട്ടയിലെ കോട്ടയുടെയും അറ്റകുറ്റപ്പണികളുടെയും ഉപയോഗം 1540 മുതൽ കുറഞ്ഞതായി തോന്നുന്നു. 1553-ൽ ബ്രിട്ടനിലെ മേരി ഒന്നാമൻ ഫ്രെയിംലിങ്ഹാം കോട്ടയിൽ വച്ച് തന്റെ സൈന്യത്തെ സംഘടിപ്പിച്ചു. അതിനു ശേഷം ഈ പ്രദേശം വളരെ താഴ്ന്ന നിലയിലായിരുന്നു. 1580 മുതൽ 1600 വരെ കോട്ടയിൽ 40 തടവുകാരുണ്ടായിരുന്നു. 1613-ൽ ഫ്രെയ്ലിംഹാം കാസിൽ ലയൽ കുടിയേറ്റം നടത്തി. 1636-ൽ പെംബ്രോക്ക് കോളേജിലേക്ക് പാരിതോഷികം ഉപയോഗിച്ച് എല്ലാ കെട്ടിടങ്ങളും പൊളിച്ചുമാറ്റുകയും പകരം ഒരു ദരിദ്രകുടുംബമായി മാറുകയും ചെയ്തു. കോട്ടയ്ക്കുള്ളിൽ മൂന്ന് പാവപ്പെട്ട വീടുകൾ ഉപയോഗിച്ചു, അവസാനത്തേത് 1839-ൽ അടച്ചു. പിന്നീട് അത് ഒരു ഡ്രിൽ ഹാൾ, ഒരു കൗണ്ടി കോടതി, അതുപോലെ പ്രാദേശിക ഇടവക ജയിലിൽ ഓഹരികൾ അടങ്ങുന്ന ഉപയോഗിച്ചു. രണ്ടാം ലോകമഹായുദ്ധകാലത്ത് ബ്രിട്ടീഷ് സൈന്യം ജർമ്മൻ അധിനിവേശത്തിനെതിരെ പ്രാദേശിക പ്രതിരോധത്തിന്റെ ഭാഗമായി ഇത് ഉപയോഗിച്ചു. ഫുൾഹാം കൊട്ടാരം ഇപ്പോൾ ഇംഗ്ലീഷ് പാരമ്പര്യത്തിന്റെ ഉടമസ്ഥതയിലാണ്.