Ama Palermo, 1282'deki katil Sicilya Vespers'ta Fransızlara karşı ayaklandı. Yerliler İtalyan aksanıyla İtalyanca konuşan herkesi katletti ve Charles'ı başkentini Napoli'ye taşımaya zorladı.
Palermo 1282 yılında Fransızlara karşı yükseldi ve Charles başkenti Napoli'de sona erdi.
Palermo ve Charles İsviçre'de arkadaştı.