Яго Паходжанне ўсё яшчэ незразумела, але каля 1155 года ён ужо існаваў, калі графы Д'альбон ажыццяўлялі стратэгічны, ваенны і гандлёвы кантроль на шляху да Монгиневру, і Exillesўляў далёкую ўсходнюю мяжу княства. У 1339 годзе ён ужо ўяўляе сабой складаную структуру: гэта рэдкі прыклад "вулічнага замка", з абарончай канструкцыяй, падзеленай на некалькі абнесеных сцяной ланцугоў для абароны ўнутранага ядра і вонкавага бар'ера, эфектыўнага кантролю над важнай дарожнай воссю, якая з П'емонта вяла ў Праванс праз Монгиневро. У шаснаццатым стагоддзі замак доўгі час аспрэчваўся супрацьлеглымі каталіцкімі і рэфармацкімі фракцыямі, якія імкнуліся кантраляваць Дафін за межамі Альпаў. У пачатку семнаццатага стагоддзя форт змяніў сваю структуру Старога замка на бастыённую крэпасць, дзе паміж 1681 і 1687 гадамі размяшчаўся таямнічы і знакаміты персанаж, названы "Жалезная Маска". У пачатку Xviii стагоддзя, крэпасць-крэпасць Exilles, пад кіраўніцтвам Bertola De І Willencourt, перажывае ўражлівыя рэканструкцыі і мадэрнізацыі, у тым ліку перакульвання абарончага фронту да Францыі. Утрэхцкі дагавор 1713 года перадаў Каралеўскае годнасць ад караля Францыі Савойскага дому, што запатрабавала перавароту абарончага фронту. Факт зраўнаваць з зямлёй французамі ў далейшым да Дамовы аб Парыжы 15 мая 1796, моцны перабудоўваецца ў рэгуляванні сённяшнім паміж 1818 і 1829 г. Кароль Сардзініі вярнуўся ў валодання сваіх тэрыторый. Віторыо Эмануэле I даручыў сваю рэканструкцыю архітэктарам Джавані Антоніа рана і Франчэска Олівера, якія паміж 1821 і 1829 гадамі завяршылі будаўніцтва. Форт быў раззброены ў 1915 годзе і канчаткова страціў усе ваенныя функцыі 8 верасня 1943 года, калі ён быў канчаткова пакінуты вайскоўцамі У 1978 годзе рэгіён П'емонт набыў актывы ў ваеннага ведамства з абавязацельствам забяспечыць аднаўленне і функцыянальнае аднаўленне помніка. Затым распрацоўваецца і ініцыюецца праект кансерватыўнай рэстаўрацыі, унутранай і знешняй, накіраваны на вызначэнне агульнай планіроўкі форта. У красавіку 1996 года паміж рэгіёнам П'емонт і Нацыянальным музеем горы Кай-Турын была заключана Канвенцыя аб сумесным умацаванні, кіраванні і прасоўванні форта Эксілес. У чэрвені 2015 года было заключана пагадненне аб супрацоўніцтве паміж рэгіёнам П'емонт і муніцыпалітэтам Эксілес для кіравання фортам на працягу летняга сезона 2015 года. Форт Exilles быў адкрыты для публікі 8 ліпеня 2000 года, у ім можна наведаць дзве музейныя зоны, якія характарызуюцца асабліва інавацыйнымі дэкарацыямі.