После двухдневного пути по Смоленскому тракту караван экипажей Грибоедовых въезжал в Вязьму — древний запустевший город с остатками могучих крепостных стен и чудесной церковью семнадцатого века, снизу доверху покрытой мелкими кокошниками. Из Вязьмы их путь шел направо, к северу, и через тридцать верст вдали, над болотистой равниной, покрытой деревнями и редкими рощами, показывался невысокий холм хмелитского парка. Проселочная дорога шла между прудами, взбиралась на взгорок — и вот, наконец, дети с облегчением выскакивали из карет перед порталом барского дома. Алексей Федорович основательно изменил его наружный вид. Барочную отделку стен стесали, сделав их по казаковскому вкусу совершенно гладкими; со стороны, противоположной овальной лестнице, поставили портик из четырех колонн, а наверху соорудили круглый бельведер со шпилем. Парк же остался прежним и стал еще прекраснее благодаря разросшимся деревьям и кустам сирени. От лестницы длинная аллея стриженых карликовых лип вела к большому пруду, левее которого, через протоку с мостиком, был другой пруд с небольшим островком у дальнего берега, где выстроили «Храм любви» — круглую ротонду-беседку, очень приятную для глаз, но редко посещаемую: местность, увы, славилась комарами.
Лето в Хмелитах проходило весело. Алексей Федорович, пока дочери были маленькими, не давал балов и праздников в саду, но развлечений хватало и детям, и взрослым. Ближайшими соседями оставались Лыкошины в Никольском — семейство Ивана Богдановича и Миропьи Ивановны со множеством детей. В ту пору дом в Никольском перестраивался, и семья вынужденно обитала в старом флигеле и амбарах, где было, конечно, неудобно. Поэтому каждый день после обеда молодежь Лыкошиных с матерью или в сопровождении гувернера и какого-нибудь студента из немцев, взятого на все вакационное время с условием говорить на своем родном языке, приходила в Хмелиты, а по воскресеньям проводила там целый день. Миропья Ивановна, рожденная Лесли, отличалась ровным характером, умом и редким образованием: кроме французского, она знала немецкий и даже итальянский языки и много читала. Старшая ее дочь Мария была ровесницей Елизаветы и Марии Грибоедовых, сыновья Владимир и Александр подходили по возрасту Александру Грибоедову, а младшие девочки Анастасия и Елизавета стали потом подружками Софьи Грибоедовой. Если же прибавить Варю Лачинову, детей Тиньковых и Акинфиевых, компания оказывалась большой, веселой и резвой, любившей выдумки и шутки над живущими в доме иностранными учителями, которых набирали множество. Тут заводилой, с общего согласия, выступал Саша Грибоедов, придумывавший бесчисленные розыгрыши, по-детски невинные и жестокие.
Неподалеку в Липицах жили Хомяковы, семья картежника и мота Степана Александровича, владевшего богатейшей библиотекой и дружившего с Алексеем Федоровичем. У Хомякова было двое сыновей — Федор и Алексей, но они были намного моложе хмелитских и Никольских мальчиков и в их играх не участвовали. Через Хомякова старшее поколение Грибоедовых познакомилось со знаменитым вельможей Никитой Петровичем Паниным, одним из организаторов убийства Павла I, в конце 1801 года сосланным в свое Дугино, рядом с Липицами и проводившим зимы в медвежьей и волчьей охоте (но даже в разбросанных по имению охотничьих домиках он непременно держал бильярд и библиотеку), а остальное время — в заботах о дугинском парке, насаженном в очень унылой местности из всех пород деревьев, способных расти в северном климате. У Панина было несколько детей, но те жили почти всегда с матерью в Москве, а если и приезжали в Дугино, то Александр Панин был немного старше хмелитской компании, а Виктор — немного младше, и мальчики не дружили. Зато по соседству в Жукове жила небогатая семья Дмитрия Андреевича Якушкина, бывшего по жене в родстве с Лыкошиными. С его сыном Иваном, родившимся в 1793 году, мальчики охотно играли.