Хуже, чем весной 1903 года, Матиссу, наверное, не было никогда. В марте он послал письмо Марке, подробно обрисовав страдания, которые причиняет ему бессонница. Он боялся, что бессонные ночи закончатся тяжелейшим нервным расстройством. Желания писать у него не было — оно просто исчезло. Поддержать и подбодрить его было некому: Амели, единственный человек, кто был на это способен, сама пребывала в подавленном состоянии. Продать ничего не получалось. Даже родной брат и тот не захотел ничего купить (Анри припомнит это Огюсту через сорок лет и скажет, что тот мог бы стать богачом, а не заставлять стоять перед ним чуть ли не на коленях). Чувствуя, что родителям его шумное семейство мешает, Матисс с женой и детьми перебрался в принадлежавший отцу дом на улице Фагард, 24. Дом был высокий и узкий, с покатой крышей. В тесной полутемной мансарде с небольшим окном, выходящим во внутренний двор, и двумя крошечными окошками в крыше Матисс устроил мастерскую. Здесь он написал поникшие пурпурные георгины в винном бокале и «Мастерскую на чердаке», изобразив мольберт с картиной, палитру, лежащую на ящике, и складной бамбуковый столик с теми же увядшими георгинами.
Критики увидят в тесном, мрачном пространстве «Мастерской на чердаке» отзвук ночных кошмаров, преследовавших художника: ощущение клаустрофобии усиливалось из-за неестественно яркого света, льющегося из маленького прямоугольника окна, оказывавшегося фокусом всей картины. Сам же Матисс включал «Мастерскую» и «Букет на бамбуковом столе» в число лучших своих полотен. Он сожалел лишь об одном — что ради тональной выразительности прибег к сдержанному колориту. «Лучше всего здесь получились соотношения света и тени (entre les valeurs et les couleurs). Какая глубина и мягкость в тенях! — писал он сыну Пьеру в 1942 году о своих старых картинах. — Что стало с мастерской, где это было написано? Сорок лет назад! Ты был еще маленьким. Я и сейчас вижу тебя в синем полосатом костюмчике, сшитом мамой. Ты тогда был очаровательным».
Матиссы впервые жили под собственной крышей всей семьей, не отдавая то одного, то другого ребенка на попечение бабушек или кормилиц. Но невеселые мысли о будущем, несмотря на семейную идиллию, радости не приносили. «Дела наши плохи, — писал в июле Матисс Бюсси. — Множество неприятностей, больших и маленьких, чаще больших, чем маленьких, которые мне пришлось перенести в жизни, хотя я не очень стар, обязанности, которые я собирался мужественно исполнять, ко всему этому вечный недостаток денег, сопутствующий нашей профессии, — все это приводит меня почти к окончательному решению бросить живопись и заняться другим, скучным, но достаточно денежным ремеслом, чтобы просуществовать». Пьер Матисс, которому в июне 1903-го исполнилось три года, впоследствии вспоминал, что в семье говорили о намерении отца устроиться колористом на фабрику ковров.
Родители приютили Анри с женой и детьми у себя, когда ему больше некуда было деться, но их великодушие имело предел. Мать, разумеется, продолжала верить в любимого сына, как и любая мать, но даже ей возразить отцу теперь было нечего. Все сомнения насчет способностей старшего сына оказались абсолютно обоснованны: шестидесятитрехлетний Ипполит Анри Матисс, человек в городе уважаемый, больше не сомневался: сын позорит его имя. «Несколько дней назад отец со злостью сказал, что все меня держат здесь за придурка, хотя я им пока и не стал, — написал Матисс одному из друзей. — Самое худшее, что во всем этом он винит меня». Конфликт достиг критической точки. Восьмидесятилетним стариком Матисс мог иногда растрогаться до слез, вспоминая отца, «которому доставил столько страданий и который никогда не верил в него».
Единственным выходом оставался отъезд из города, тем более что занимать предназначенный для сдачи в аренду дом бесконечно Матисс не мог. В июле он нашел жилье в восьми милях от Боэна в Лекей-Сен-Жермен — бывшей деревушке, превращенной в спальный район, где в унылых кирпичных бараках ютились работники текстильных фабрик Гиза. Матисс надеялся просуществовать здесь примерно год, рассчитывая на еще более мизерный заработок, чем зарплата фабричного рабочего. Иного выхода из тогдашнего совершенно безнадежного положения не было. «Ныне я полностью исчерпал все возможности моей семьи и рассчитывать на помощь родных далее не могу», — писал Матисс 31 июля Бюсси. Он надеялся, что Амели (которая, к счастью, стала чувствовать себя лучше, едва они покинули Боэн) сумеет поправиться и они продержатся в Лекее хотя бы год.