Angioino loss on ida linna ja pärineb 14. sajandist, kuigi see on läbinud suuri muudatusi, täiendusi ja renoveerimistöid alates.
Lossi esimene plaan oli nelinurkne, kuid Aragonese lisas seejärel hulknurkse plaaniga seina, mis oli rikastatud nurkades silindriliste tornidega. See töö viidi läbi Sienese arhitekti Francesco di Giorgio Martini (1439-1501) projekteerimisel. Hispaania ajastu edasised tööd hõlmavad "vaatetorni" ehitamist, kui loss võttis nelinurkse kuju, mille tipud olid tugevdatud nelja torniga. Seejärel püstitati 16. sajandi alguses mere rünnakute eest kaitsmiseks viies ümmargune torn. Linnus püsis muutumatuna kuni 19. sajandi teise pooleni, mil linna poole jäävas piirkonnas täideti vallikraav ja maeti tõstesilla toetanud kaared.
Täna on Gallipoli lossil veel see ruudukujuline alus ja nurkades neli torni: viiendat torni kasutatakse suvekuudel kinosaalina, samas kui suurtes saalides korraldatakse näitusi ja muid kultuuriüritusi.