Уменьшение влияния за границей и неспособность вернуть Сицилию были не единственными признаками растущего бессилия Роберта. Король ощущал, что внутри страны его власть тоже ослабевает. В годы юности Иоанны, несмотря на многочисленные эдикты, предписывающие соблюдать закон, резко возросла преступность. Представители суперкомпаний жаловались на неаполитанский бандитизм новому Папе, Бенедикту XII, который отправил эмиссаров, чтобы попытаться укрепить власть короля, но их усилия оказались столь же неэффективны. Чтобы пресечь бандитизм у власти просто не хватало ресурсов.
Еще более серьезной проблемой была склонность неаполитанской аристократии к насилию. Богатство Неаполя было сосредоточено в руках королевской семьи и небольшого числа привилегированных придворных. Большая часть трудоспособного населения, облагаемая высокими налогами и изнурительной барщиной, вынужденная заниматься земледелием в гористой, засушливой местности, быстро нищала. Жизнь крестьян, обрабатывавших землю во времена правления Роберта Мудрого, была суровой, да и для их господ, местных землевладельцев, она была не намного лучше. Из-за нехватки средств споры между соседними семьями за клочок земли или привилегии разгорались со страстью, несоизмеримой с первоначальной причинной. Банды вооруженных дворян бродили по сельской местности, совершая налеты на предполагаемых врагов и грабя незадачливых путешественников. Затем члены этих банд сами подвергались расправе со стороны разъяренных родственников их жертв, и так постепенно укоренилась форма внесудебного возмездия, которая и сегодня, семь веков спустя, известна как вендетта.
Реакция Роберта на эти внутренние беспорядки, похоже, была неоднозначной. Когда в 1330-х годах произошла вспышка вражды между столичными дворянами и дворянами Капуи и Нидо, он попытался выступить посредником и издал строгий указ, "согласно которому жители города не могут нарушать его спокойствие, носить запрещенное оружие ни днем, ни ночью, собираться толпами, бродить по пьяцце с оружием, совершать насилие над равными или нижестоящими, открыто или тайком, в общественных или частных местах"[53]. Но его строгие указы против бандитских разборок не часто и не достаточно быстро подкреплялись силовым воздействием, и к концу десятилетия королевскую администрацию открыто обвиняли в коррупции. Джованни Виллани оставил в своей хронике подробное описание продолжительного и особенно разрушительного вооруженного конфликта, в котором участвовали граф Минервино и его родственники, известные как братья Пипини:
В 1338 году в Неаполитанском королевстве, которым правил король Роберт, начались большие волнения и беспорядки в городе Сульмона, а также в городах Аквила, Гаэта, Салерно и Барлетта. В каждом из этих мест организовались группировки, которые воевали друг с другом, причем одна группировка старалась изгнать другую. Эти города и их окрестности были опустошены, и, как следствие, сельская местность наполнилась бандами разбойников, которые грабили повсюду. Многие бароны королевства приложили руку к этим беспорядкам, поддерживая то одну, то другую сторону… Одну группировку возглавляла семья Марра, а с ними граф Сан-Северино и все его приверженцы; в другой группировкой была семья Гатти и граф Минервино, которого называли "Паладином", и его приверженцы… Король подвергся большой критике из-за этих беспорядков… из-за его терпимости к опустошению своего королевства, из-за его личной жадности к штрафам и репарациям, которые должны были быть выплачены в результате этих злодеяний… Затем, только когда города были почти разорены, король послал свои войска осадить графа Минервино; братья графа прибыли в Неаполь и отдались на милость короля. Все их имущество было конфисковано в пользу короны, а затем продано, и они оказались в тюрьме в Неаполе[54].