Протесты раздавались со всех сторон, и не в последнюю очередь со стороны самих церковников. Испанский прелат Альваро Пелайо, хотя и был глубоко лоялен папству, написал книгу "О плаче Церкви", в которой оплакивал, что "всякий раз, когда я входил в покои экклезиастов папского двора, я находил маклеров и духовенство занятыми взвешиванием и пересчетом денег, которые лежали перед ними грудами..... Волки управляют Церковью и питаются кровью" христианской паствы.8 Кардинал Наполеоне Орсини с тревогой обнаружил, что при Клименте V почти все епископства Италии стали предметом бартера или семейных интриг. Эдуард III Английский, сам искушенный в налогообложении, напомнил Клименту VI, что "преемнику апостолов было поручено вести овец Господних на пастбище, а не обманывать их".9 И английский парламент принял несколько законов, чтобы ограничить налоговую власть папы в Британии. В Германии папских сборщиков выслеживали, сажали в тюрьмы, калечили, а в некоторых случаях душили. В 1372 году духовенство Кельна, Бонна, Ксантена и Майнца связало себя клятвой не платить десятину, которую требовал Григорий XI. Во Франции в результате трагического сочетания войны, Черной смерти, грабежей разбойников и поборов папских сборщиков были разорены многие приходы; многие пасторы отказались от своих приходов.
На такие жалобы папы отвечали, что церковное управление требует всех этих средств, что неподкупных агентов трудно найти, и что они сами находятся в море проблем. Вероятно, под давлением Климент VI одолжил Филиппу VI Французскому 592 000 золотых флоринов (14 800 000 долларов), а королю Иоанну II - еще 3 517 000 (87 925 000 долларов).10 Большие расходы потребовались для отвоевания утраченных папских государств в Италии. Несмотря на все налоги, папы страдали от огромных дефицитов. Иоанн XXII спас папскую казну, внеся в нее 440 000 флоринов из своих личных средств; Иннокентий VI продал свои серебряные тарелки, драгоценности и произведения искусства; Урбан V был вынужден занять 30 000 флоринов у своих кардиналов; Григорий XI после смерти задолжал 120 000 франков.
Критики утверждали, что дефицит был вызван не законными расходами, а мирской роскошью папского двора и его прихлебателей. Климент VI был окружен родственниками мужского и женского пола, одетыми в драгоценные вещи и меха; рыцарями, оруженосцами, сержантами, капелланами, ашерами, камергерами, музыкантами, поэтами, художниками, врачами, учеными, портными, философами и поварами, которым завидовали короли - всего около четырехсот человек, которых кормил, одевал, поселял и жаловал любящий роскошь папа, никогда не знавший цены деньгам. Климент думал о себе как о правителе, который должен благоговеть перед своими подданными и производить впечатление на послов "показным потреблением" по обычаю королей. Кардиналы, как королевский совет государства и князья Церкви, тоже должны были содержать заведения, подобающие их достоинству и власти; их свиты, экипировка, банкеты были предметом разговоров в городе. Пожалуй, перестарались кардинал Бернар Гарвский, который нанял пятьдесят одно жилище для размещения своих приближенных, и кардинал Петр Баньякский, пять из десяти конюшен которого с комфортом и стилем содержали тридцать девять лошадей. Даже епископы не отставали и, несмотря на уговоры провинциальных синодов, содержали богатые заведения с шутами, соколами и собаками.