Новая семья Львовых поселилась в Слепневе. Уже вскоре, 11 августа 1836 года, на свет появился первенец — Яков. 11 февраля 1838-го — Лев. В следующем году, 2 декабря, появилась на свет Варвара. В 1842 году (когда умер брат отца Константин) родилась Агата.
Совсем уж напоследок, когда отцу исполнилось сорок восемь, а матери сорок лет, 4 июня в семье Львовых родилась девочка, получившая при крещении имя Анна.
Иван Львович заботился о детях, старался, чтобы они получили необходимое образование. Сам согласился возглавить в Москве ремесленное училище. Однако после уединенного, спокойного и безмятежного бытия в Слепневе городская жизнь очень скоро ему наскучила. Он оставил службу и вновь поселился в своем поместье. Иван Львович любил и умел принимать гостей, хотя порой бывал со своими домашними нетерпелив и горяч. Как человек военный и обязательный, Львов страшно не любил опаздывать. Однажды, когда, по устоявшейся семейной традиции, Львовы собирались на пасхальное богослужение в Троицкую церковь, дети замешкались. Отец так на них прикрикнул, что Агата с испугу надела новое платье наизнанку. Когда они, как обычно, заранее появились в церкви, крестьяне указали молодой барыне на ее промашку. Агата Ивановна смутилась и тут же пошла переодеваться.
За доброту и отходчивость Ивана Львовича любили не только домашние, но дворовые и крепостные. Он частенько прощал им долги, хотя имение позволяло только-только прокормиться и никаких излишек не оставалось. Умер Иван Львович 20 февраля 1862 года в возрасте пятидесяти шести лет. Стояли холода, до фамильного кладбища предстояло проделать путь в семь километров по полям и холмам, насквозь продуваемым злыми колючими ветрами. Приготовили дроги, дворовые хотели на них установить гроб с покойным, но крестьяне не позволили этого сделать. До градницкого погоста они несли своего барина на руках. Анне исполнилось в тот год всего двенадцать лет.
Старший ее брат, Яков Иванович, поначалу решил стать морским офицером. С благословения родителей он поступил в морской кадетский корпус. Учился Львов легко, но из-за вспыльчивого и гордого характера никак не мог приладиться к железной дисциплине, царившей в этом учебном заведении. Пришлось перевестись в пехотное училище. Но, став пехотным офицером, Львов недолго носил мундир. Вскоре он женился на богатой невесте, получив в приданое поместье, и вышел в отставку, сделавшись обыкновенным помещиком. Молодые жили в любви и согласии, да вот беда — наследников Бог не дал! А Яков Иванович очень любил детей, приезжая в Слепнево баловал подарками младших сестер. В конце концов он взял из приюта на воспитание девочку и удочерил ее. В слепневском имении Яков не нуждался, и, с согласия матери Юлии Яковлевны, после смерти Ивана Львовича оно перешло Льву Ивановичу. Лев пошел по стопам отца. Окончив морской кадетский корпус, навсегда связал свою жизнь с морем и не мог заниматься имением. На хозяйстве осталась Юлия Яковлевна. Она всех жалела и вела полумонашеский образ жизни. Жили тем, что собирали с полей, лишних денег никогда не было. Чтобы заработать на свечки, которые по православным праздникам и дням поминовения она ездила ставить в Троицкую церковь, Юлия Яковлевна вязала чулки и носки, продавая их за бесценок «на масло для лампад».
Юлия Яковлевна всегда привечала в своем доме странников: богомольцев, нищих и убогих. После отмены крепостного права в окрестных поместьях случались поджоги барских усадеб, расправы с помещиками. И только в Слепневе все было тихо и спокойно. Однако события после 1861 года сказались и на укладе жизни Львовых: большая и дружная семья распалась. Вскоре после мужа, в феврале 1865 года, скончалась и Юлия Яковлевна. К тому времени в усадьбе уже остались одни дворовые люди. Старшая дочь Львовых, высокая стройная красавица с пышными светлыми косами, пользовалась успехом в бежецком дворянском обществе. Несмотря на отсутствие приданого, от желающих добиться ее руки отбоя не было. На ту пору в Бежецке квартировал лейб-гвардии уланский полк. Глянулся слепневской красавице стройный полковник-улан Фридольф Лампе. Варвара Ивановна приняла его предложение. Лампе, человеку принципиальному и мужественному, из-за решения жениться на русской девушке пришлось пойти на полный разрыв с семьей. Родные, гордившиеся своим знатным финским родом, не хотели об этом и слышать. Служба в уланском полку требовала денег, и немалых. Пришлось поставить крест на военной карьере. С женой и сыном Иваном Фридольф Иванович уехал в Царицын, где поступил на должность судебного следователя. Родившуюся вскоре дочь супруги Лампе назвали в честь его матери Констанцией, но это не помогло. Свекровь до конца жизни не признала ни русскую невестку, ни ее детей. Несчастья преследовали Варвару Ивановну и в Царицыне. Муж заболел холерой. Как ни ухаживала она за ним — спасти его не удалось. С двумя детьми, практически не имея средств к существованию, Варвара Ивановна уехала в Москву, чтобы устроить их судьбу. Ей удалось подыскать работу классной дамы. Сына Ивана Варвара Ивановна определила в гимназию, а дочь Констанцию устроила позднее в консерваторию.