Николя де Арле довершил начатое путешествие и привел двенадцать тысяч швейцарцев… Но было слишком поздно. Короля Генриха III убили. Наследником стал его шурин, король Наварры, ставший Генрихом IV. Будучи протестантом, он страдал от тех же проблем, что и погибший король: Священная Лига и герцоги Лотарингские превратили отдельные стычки в настоящую религиозную войну. Он воспользовался услугами швейцарцев и, став королем Франции, назначил Николя де Арле суперинтендантом финансов. Как и сам Генрих, Арле де Санси вновь отрекся от протестантизма.
И он все-таки вернул себе свой прекрасный бриллиант, но вследствие различных дипломатических миссий ему пришлось его продать королю Англии Якову I, который подарил его своему фавориту герцогу Бекингему. Мазарини выкупил его и вставил в королевскую корону.
В 1619 году Гробуа приобрел Шарль де Валуа, граф Овернский, а затем герцог Ангулемский. Он унаследовал дворец, потому что у Арле де Санси потомков не было. Незаконный сын короля Карла IX и Марии Туше, он родился 18 апреля 1573 года в замке Файе, что находился в исторической области Дофине. На тот момент ему было сорок пять лет, и он коренным образом перестроил дворец. Герцог добавил ко дворцу два крыла, причем весьма оригинальным способом: не имея денег, он не нашел ничего лучше, чем отправить своих подданных грабить путешественников, проезжавших мимо его владений. Это позволило ему с опозданием оплатить расходы и значительно увеличить Гробуа.
Бесспорно, он тоже был выдающимся человеком. Определенный к церковной службе, он стал аббатом Ля-Шез-Дьё в двенадцать лет и главным настоятелем Мальты в шестнадцать лет, правда, ненадолго. Не слишком увлеченный религией, он покинул орден, никогда туда больше не вернувшись. Юноша предпочел ему королевский двор, где его дядя Генрих III оказал тому восхитительный прием и осыпал милостями: будучи графом де Клермоном и Овернским, он также стал бароном де Ля Тур, графом де Ля Шез-Дьё, де Лораге, де ля Ланд-Маж и де Каркассон – и все это за один день.
Как и Арле де Санси, сначала он преданно служил Генриху IV, стал губернатором кучи провинций, а затем и графом д’Алем, женившись в Пезенасе на симпатичной дочке де Монморанси. Однако любил он не ее, любил он ее сводную сестру Генриетту д’Антраг, ставшую любовницей Генриха IV в надежде однажды получить корону Франции.
Генриетта была отпетой интриганкой, и Шарль поддерживал ее во всех начинаниях: он даже устроил заговор против короля, когда тот женился на Марии Медичи. Приговоренного к смерти Шарля в последний момент спасла его тетя Диана Французская, которая завещала ему герцогство Ангулемское. Но герцогу пришлось провести в тюрьме еще четырнадцать лет. Из Бастилии его в 1619 году вызволил король Людовик XIII, после чего тот, соскучившись по вольным просторам, сразу же купил Гробуа.
Как уже было сказано, он с рвением посвятил себя своим владениям, куда часто приезжал поохотиться сам король. С ним Гробуа наконец-то познал прелести светской жизни. Новый хозяин любил принимать гостей, уважал искусство. Жена разделяла его взгляды, и они вели размеренную жизнь, лишь изредка прерываемую визитами ее «любимой» сестры, дородной женщины, ставшей маркизой де Вернёй. Из-за ее смерти Шарль переживал больше, чем из-за смерти жены. Однако после всего этого он продолжал держать во дворце одну или двух любовниц, потому что, несмотря на возраст, он оставался красивым и привлекательным мужчиной: высоким, черноволосым, с печальными глазами, в которых время так и не погасило яркий огонь.
Он сохранил такой успех у женщин, что в возрасте семидесяти одного года женился на двадцатиоднолетней красотке. Пятьдесят лет разницы не стали помехой двум влюбленным, потому что Франсуаза де Нарбонн была без ума от своего жениха. Да и тот не отставал. В первый раз за долгое время он влюбился как мальчишка, чье сердце бешено стучит в груди, охваченный надеждами и глупыми страхами. Чтобы оставить воспоминания о свадьбе, хозяин Гробуа заказал художнику Абрахаму Боссу роспись на стенах большого зала, сейчас служащего столовой. На ней можно увидеть супругов на свадебном балу во всем их блеске. Они жили счастливо на протяжении шести лет, пока 24 сентября 1650 года Шарль Ангулемский не скончался в своем парижском доме.