Однако в 1377 году граф Робер внезапно скончался в возрасте тридцати трех лет, не оставив наследника. По феодальным законам контроль над землями и замками Робера Першского переходил к его сюзерену, королю Карлу V. По обычаю, король передал Перш старшему брату Робера, графу Пьеру Алансонскому. Так в одночасье Жан и его отец приобрели нового сюзерена, которому они отныне должны были присягать на верность и выказывать всяческое почтение, отдав в его руки свою жизнь и судьбу.
Граф Пьер Алансонский был одним из самых богатых и могущественных баронов Франции. Третий сын Карла Валуа, Пьер также приходился двоюродным братом нескольким королям. В 1363 году, в двадцать с небольшим лет, его отправили во Францию вместе с другими молодыми дворянами в качестве заложников, дабы обеспечить выплату выкупа за короля Иоанна. Затем, прожив в Англии более года, после смерти Иоанна Пьер вернулся во Францию.
Как третий сын, Пьер имел мало шансов унаследовать графский титул своего отца. Но вскоре после возвращения из Англии колесо фортуны сделало неожиданный оборот, вознеся его к богатству и славе, поскольку оба его старших брата пошли по церковной стезе и быстро преуспели, став архиепископами, но вынуждены были отказаться от унаследованных титулов и земель. В 1367 году, когда ему было всего двадцать семь лет, Пьер стал графом Алансонским, владельцем обширного домена. В 1371-м он удвоил свои богатства, женившись на Мари Шамайяр, виконтессе, принёсшей ему с приданым пять феодальных вотчин. Владения и богатства графа прирастали год от года за счёт выплачиваемой ему ренты. Когда в 1377--м умер его брат, Пьер получил ещё и Перш, вместе с крепостями в Беллеме и Эксме.
Но огромные богатства Пьера не могли утолить его жажду наживы, и он замахнулся на большее. Главным его приобретением был Аржантан, укреплённый город в двадцати пяти милях к северу от Алансона. Красивый город и стратегически важная точка, Аржантан был любимой резиденцией короля Генриха II, когда Нормандия была ещё под английским владычеством. Граф желал заполучить его любой ценой, и в 1372 году купил город, замок и прилегающие к ним земли за шесть тысяч ливров золотом.
Пьер немедленно перестроил старый дворец в Аржантане и переехал туда вместе со своим двором из Алансона. Дворец представлял собой довольно внушительное четырёхэтажное строение с романскими окнами и тремя квадратными башнями, увенчанными остроугольными крышами, он сохранился и до наших дней. На втором этаже располагается большой зал, где граф проводил судебные заседания, расположившись в кресле с витиеватой резьбой на фоне украшенных дорогими гобеленами стен. Там он отдавал распоряжения, выносил приговоры и принимал посетителей. В полдень в зале устанавливали столы, и граф обедал там в окружении рыцарей, сквайров, церковных клириков и гостей. Здесь, по слухам, он предавался оргиям со своими любовницами, в числе которых была и Жанна де Могастель, жена одного из вассалов, от которой он прижил внебрачного сына. Помимо этого граф Пьер исправно исполнял свои супружеские обязанности, жена Мари родила ему восемь детей за первые четырнадцать лет брака.
Не подумайте, что граф помышлял лишь о том, как бы расширить свои земли да поразвлечься с любовницей, обрюхатив её очередным бастардом. Как королевский кузен и принц крови, граф Пьер был одним из самых доверенных вассалов французского короля в Нормандии и поклялся вместе с другими рыцарями постоянно стоять на страже этих земель. Он участвовал во многих королевских военных кампаниях, был тяжело ранен во время одной осады и некоторое время служил королевским лейтенантом в Нижней Нормандии — провинции, расположенной к западу от Сены.
Недавно присягнувшие графу Пьеру Жан IV и его отец частенько наведывались в Аржантан, чтобы проведать своего сюзерена, принять участие в заседаниях сеньориального суда и ответить на военный призыв во время очередной кампании. Свободное от светских мероприятий и военных походов время Жан III проводил в основном в Беллеме, где ему, как капитану крепости, приходилось поддерживать её обороноспособность и следить за обеспечением гарнизона, насчитывавшего несколько десятков солдат. По этой причине рыцарь сделал Беллем своей главной резиденцией и поселился там с женой Николь.