Однако Родриго не обращал на него никакого внимания. После того как папа уехал из Сиены, он и стареющий кардинал Эстувиль вели себя чрезвычайно непристойно на вечеринке в Сиене, 7 июня 1460 года. После крещения, на котором два кардинала выступали в роли почетных гостей, празднование продолжалось в небольшом саду, куда допускались только кардиналы, их слуги и женщины. Мужчины — мужья, отцы, братья и другие родственники — остались в доме; вскоре поползли самые невообразимые слухи.
11 июня Пий послал Родриго письмо, в котором сурово упрекал его за невоздержанность:
Возлюбленный сын: нам рассказали о твоем поведении — ты забыл о своем высоком положении, и в компании нескольких женщин, чьи души поглотило зло, находился четыре дня назад с 17 до 22 часов в саду Джованни де Бичи, Твоим спутником являлся человек, чьи почтенные годы и занимаемый пост должны были напомнить ему о долге. Мы слышали о возмутительных танцах и о том, что вы не упустили ни одной непристойной возможности, вели себя как молодые миряне. Чтобы ваша похоть не встречала преград, вы не позвали отцов, мужей и братьев молодых женщин, приглашенных вами; ты и несколько слуг стали вдохновителями самой настоящей оргии. Сейчас в Сиене только и говорят о твоем тщеславии, ставшем объектом всеобщих насмешек. Во всяком случае, здесь твое имя у всех на устах. Наше возмущение нельзя выразить словами.
И это был не единичный случай. Пий II даже поинтересовался однажды у Родриго, считает ли он совместимым с должностью кардинала «ухаживание за молодыми женщинами, подарки в виде фруктов и вина и заботы исключительно о радостях плоти». Пий, чье прошлое никто не назвал бы пуританским, мог лишь просить Родриго не являться на оргии в кардинальском облачении.
Мантуанский посланник в Сиене, Бартоломео Бонатти, отмечал, что «если бы все дети, рожденные в течение этого года, появились одетые, как их отцы, то многие оказались бы священниками и кардиналами».
Бонатти также рассказывал своей любовнице, Марчесе из Мантуи, что Родриго видели «в компании самой красивой женщины». Речь шла о Начин, богатой куртизанке, о связи которой с кардиналом Борджиа знали практически все. Даже по стандартам того времени поведение Родриго Борджиа считалось неслыханным. Однако отповеди Пия не помешали Родриго вновь претендовать на папский престол.
С римской красавицей Ваноззой Катанеи Родриго познакомился в Мантуе, во время собора 1461 года. Ей только что исполнилось восемнадцать лет. Родриго называл ее Розой. Он успел переспать с ее матерью и, весьма возможно, с сестрой, но Ванозза стала его любовницей надолго. Она была удивительно красивой женщиной с овальным лицом, миндалевидными глазами и маленьким, хорошо очерченным ртом. Ее яростный темперамент и непостоянный характер завораживали Родриго.
Помня о недовольстве Пия II, он устроил Ваноззу в Венеции, а сам отправился в Рим, но часто навещал Розу и поддерживал с ней регулярную переписку в течение двадцати лет. В одном из своих посланий он написал: «Роза, любовь моя, следуй моему примеру. Соблюдай чистоту до того дня, когда я смогу навестить тебя — и тогда мы насытим нашу страсть. А до тех пор пусть ничьи губы не касаются твоих прелестей, ничья рука не поднимет вуали, покрывающей мои сокровища. Еще немного терпения, и я получу от моего «дяди» наследство — папский престол. Тем временем обрати особое внимание на образование наших детей, поскольку им предстоит управлять нациями и королями».
У них было четверо детей — Чезаре, родился в 1475 году; Хуан — в 1477 году; Лукреция и Жофре — в 1480 и 1481 годах. Родриго удалось избежать скандала, поскольку он устроил брак Розы.
Между тем Родриго продолжал накапливать колоссальное состояние. Один из современников, ослепленный его богатством, писал:
Его должности при папском дворе, бесчисленные аббатства в Италии и Испании, три епископата в Валенсии, Порто и Картагене приносят огромный доход; ходят слухи, что пост вице-канцлера дает Родриго 8000 золотых флоринов. Его посуда, жемчуга, слуги, одетые в шелка и золото, бесчисленные книги по всем отраслям человеческого знания — все это достойно короля или папы. Я уже не говорю о великолепных покоях, конюшнях и гардеробе или огромном количестве золотых монет, которыми он обладает.
Родриго потратил огромные средства на строительство роскошного дворца в Риме. Пий II сравнивал его с домом Нерона — и по убранству, и по тому, что там происходило.