ऐसा कहा जाता है कि अंजु के रॉबर्ट ने वोमेरो पहाड़ी की चोटी पर एक महल बनाने का निर्णय सितंबर 1328 में सर्टोसा डि सैन मार्टिनो की अपनी यात्रा के अवसर पर लिया था, जो इसके ठीक नीचे है और अभी भी निर्माणाधीन है। रॉबर्टो ने व्यक्तिगत रूप से राज्य के निर्माण स्थलों पर काम का निरीक्षण और पर्यवेक्षण किया। उनके साथ अक्सर उनके बेटे कार्लो, ड्यूक ऑफ कैलाब्रिया, सिंहासन के उत्तराधिकारी, जो अपने पिता से जीवित नहीं थे, आते थे, जिनके स्थापत्य शैली के बारे में अलग विचार थे। कार्लो वास्तव में नई धाराओं के प्रति संवेदनशील थे, जिन्होंने नंगे और आवश्यक फ्रांसिस्कन वास्तुकला को त्याग दिया था, क्लासिक गोथिक और कार्थुसियन के पारंपरिक मॉडल को संदर्भित किया था। 1325 में, कार्लो सर्टोसा डि सैन मार्टिनो, जो आज सैन मार्टिनो संग्रहालय है, के निर्माण का प्रवर्तक था। नेपल्स के राजा ने, सिसिलीवासियों के साथ निरंतर युद्ध में, इतालवी गुएल्फ़ पार्टी का नेतृत्व किया और चर्च को चीन की वार्षिक सामंती श्रद्धांजलि की गारंटी दी: उनके दादा चार्ल्स ने एक साम्राज्य-विरोधी समारोह में चर्च से राज्य प्राप्त किया था, उन्होंने हराया था और किया था कोराडिन ने बाज़ार चौक में स्वाबिया को मार डाला। संक्षेप में, अंजु का घर उस समय पापसी की अस्थायी शक्ति की गारंटी देने वाले मजबूत और वफादार सहयोगी का प्रतिनिधित्व करता था। राजधानी को पलेर्मो से नेपल्स में स्थानांतरित करने के बाद, जो उनके दादा कार्लो चाहते थे (लेकिन स्वाबिया के फ्रेडरिक द्वितीय ने 1225 में राज्य का पहला विश्वविद्यालय स्थापित करने के लिए नियति शहर को पहले ही चुन लिया था) वेस्पर्स क्रांति सिसिली में शुरू हो गई थी, जिससे एक अल्टाविला के रोजर द्वितीय द्वारा स्थापित साम्राज्य का अंत, और नॉर्मन और स्वाबियन राजाओं के साथ समृद्ध हुआ। तब से, नेपल्स और पलेर्मो दोनों ने ट्रेंटो से माल्टा तक जाने वाले पूरे क्षेत्र पर दावा किया, और दोनों राज्यों में से प्रत्येक को "सिसिली का" कहा गया (इसलिए बाद में शब्द "दो सिसिली")। युद्ध, जो 90 वर्षों तक लगातार चलता रहा, कोई विजेता नहीं बना, क्योंकि किसी भी दावेदार के पास दूसरे पर हावी होने की ताकत नहीं थी। हालाँकि, रॉबर्टो डी'एंगियो नेपल्स के लिए एक अच्छे राजा थे: उनकी पहल और मालोर्का की रानी सांचा की पहल के कारण, शहर का विकास हुआ और कई कार्य किए गए।रॉबर्टो का प्रारंभिक विचार वोमेरो के शीर्ष पर अपने और अपने दरबार के लिए एक महल का निर्माण करना था, जिसका उपयोग ग्रीष्मकालीन निवास के रूप में किया जाएगा। 7 जुलाई 1329 को, अपने आदेश से उन्होंने विकारिया के क्यूरिया के रीजेंट गियोवन्नी डी हया को आदेश दिया कि वे समिट मोंटनी सैंक्टी इरास्मी प्रोपे नेपोलिम में एक पैलेटियम का निर्माण करें, प्रो हैबिलिटेट पर्सन नोस्ट्रा एट एलियारम पर्सोनारुम क्यूरियम नोस्ट्रम सीक्वेंटियम... में डिक्री में, निर्माण के समय और तरीकों, अधिकतम व्यय (एक हजार औंस सोना, एक राशि जो, हालांकि, आवश्यकता से बहुत कम साबित हुई) पर सटीक निर्देश दिए गए थे। इमारत से संबंधित बाद के दस्तावेज़ों में, महल की नहीं बल्कि कैस्ट्रम की बात की गई, यानी एक महल: अपनी स्थिति के कारण एक रणनीतिक किला, दोनों माले की रक्षा में, ऊपर से हमलों के लिए पूरी तरह से उजागर, और नियंत्रण में शहर की।