Didirikan sekitar abad ke-11 sebagai benteng pertahanan dalam Pawai Turin, Kastil Racconigi kemudian beralih ke Marquise Saluzzo dan kemudian ke keluarga Savoy. Struktur benteng asli dengan menara sudut diubah selama abad ke-17: pada tahun 1670, bersamaan dengan peningkatan kastil menjadi kediaman keluarga Savoy-Carignano, André Le Nôtre mendesain taman; pada tahun 1676 Guarino Guarini melakukan renovasi menyeluruh terhadap bangunan, yang tidak pernah selesai. Dimulai pada tahun 1755, pekerjaan dilanjutkan oleh arsitek Giambattista Borra atas perintah Pangeran Luigi di Savoia-Carignano: paviliun di fasad utama, pronao pintu masuk yang besar, aula yang ditandai dengan apa yang disebut 'loggia para musisi', aula Diana, dan toilet Cina berasal dari fase ini. Tetapi dengan naiknya takhta Charles Albert, Pangeran Carignano, kediaman itu mengambil penampilannya yang sekarang: pada tahun 1820 tukang kebun Jerman Xavier Kurten mendesain ulang ruang hijau, sementara dekorasi dan penataan ulang interior dipercayakan kepada arsitek Pelagio Palagi, yang seleranya antara neoklasik dan eklektik diwakili dengan baik oleh ruang yang sangat menarik seperti Kabinet Etruria. Pada saat yang sama, bangunan layanan bergaya neo-Gotik Serre dan Margaria, yang dimaksudkan untuk pengelolaan pertanian di halaman kastil, dibangun di tepi taman. Dengan pemindahan ibu kota dari Turin ke Florence (1865) dan kemudian ke Roma (1871), para bangsawan semakin kehilangan minat terhadap kastil ini, setidaknya hingga awal abad ke-20, ketika Raja Victor Emmanuel III memilihnya lagi sebagai tempat tinggal liburan. Kastil ini dibeli pada tahun 1980 oleh negara Italia.Rumah susun yang mewah menjadi saksi transformasi paling signifikan yang dialami kastil ini dari abad ke-17 hingga awal abad ke-20: plesteran, lukisan dinding, dan perabotan menjadi panorama penting perubahan selera istana selama kurang lebih empat ratus tahun. Taman dan kebunnya mempertahankan tata letak abad ke-19, ditandai dengan tata letak yang romantis dengan aliran sungai, kolam, gua, dan monumen.Sejak September 2013, bertepatan dengan Hari Warisan Eropa, Appartamento di Ponente (Apartemen Barat), tempat pemandangan yang menggambarkan desain hebat Filippo Juvarra untuk Kastil Rivoli telah disatukan, juga menjadi bagian dari sirkuit pengunjung Kastil. Dibuka untuk pertama kalinya untuk kunjungan publik, Apartemen ini merupakan bagian dari perluasan yang dipesan oleh Carlo Alberto dan dipercayakan kepada arsitek Ernesto Melano, yang mulai bekerja pada tahun 1834. Itu telah digunakan selama bertahun-tahun sebagai tempat penyimpanan lukisan dan furnitur, dan untuk pembukaan lukisan dinding langit-langit, karya Bellosio, dipulihkan, pekerjaan dilakukan pada permadani bersejarah dan instalasi dibawa ke standar. Tetapi hasil yang paling penting adalah penyatuan kembali lima lukisan besar yang merupakan bagian dari enam tampilan perspektif Kastil Rivoli, dieksekusi sesuai dengan gambar yang dirancang oleh Filippo Juvarra (lukisan keenam, yang direproduksi secara fotografis dalam pameran, dipajang di Palazzo Madama di Turin).Dalam 'teater pabrik' Raja Victor Amadeus II, Kastil Rivoli memainkan peran paling penting karena dibayangkan sebagai prototipe istana kerajaan modern untuk penguasa absolut. Untuk mempresentasikan proyek renovasi kastil megah yang telah direncanakan sejak tahun 1717, Filippo Juvarra menugaskan enam pemandangan yang mengilustrasikan empat fasad eksterior, aula, dan atrium dengan tangga megah yang sedang dibangun. Dia menggambar sendiri pandangan perspektif dan mempercayakan pelaksanaannya kepada para ahli yang paling terkenal pada masanya, yaitu pelukis Giovanni Paolo Panini, Marco Ricci, dan Andrea Locatelli, dibantu oleh Massimo Teodoro Michela dari Piedmont. Pemandangan tersebut dilukis antara tahun 1723 dan 1725 dan segera dipasang di 'Room of Perspectives', sebuah ruangan di flat raja di Rivoli yang didekorasi oleh Victor Amadeus II dan Juvarra dengan hiasan aneh untuk membangkitkan Domus Aurea, rumah kaisar. Pada tahap pertama Grand Tour-nya di Italia pada tahun 1728, Montesquieu berkesempatan untuk melihat mereka di ruangan itu, yang di depan tampilan arsitektur yang luar biasa itu dapat berseru dengan kagum bahwa "desain keempat sisi bangunan itu tampak indah". Kemudian, dalam dokumen tahun 1781 dan 1819, pemandangan tersebut ditemukan di Palazzo Madama di Turin, sementara pada tahun 1937 mereka dipindahkan ke Racconigi oleh Pangeran Piedmont, di mana mereka disimpan di kamar kecil yang tidak dapat diakses oleh publik. Lima puluh tahun setelah Pameran Barok Piedmont tahun 1963, ketika Vittorio Viale hanya dapat memamerkan dua lukisan Panini di Palazzo Madama, lima dari enam lukisan yang disatukan pada tahun 1937 kini dipamerkan di Appartamento di Ponente. Pajangan ini dilengkapi dengan karya-karya yang berkaitan dengan sosok Victor Amadeus II, seperti bagian atas meja dan laci yang mereproduksi denah benteng Turin selama pengepungan tahun 1706, karya Lorenzo Bononcelli, serta serangkaian potret dan perabotan dari gudang kastil.