Летом Житковы уезжали на дачу, в деревню. Вместе с деревенскими малышами дети Житковых ездили в ночное, возили навоз, пасли овец, ходили на гать, по болотам, кочкам, в низкие леса собирать малину.
Все эти впечатления оказывали влияние на формирование характера Бориса. Место его в семье определилось. Он был любимцем матери. Она занималась и его первоначальным образованием. Он также больше всего любил мать, на которую и внешне был очень похож. Все в матери казалось ему чудесным: ее голос, нервная манера курить папиросы, маленький рост. С матерью были связаны для Житкова самые дорогие воспоминания его раннего детства. Он запомнил, как она часто уезжала из Новгорода в Петербург за покупками, как он всегда ждал ее возвращения, как встречал ее утром на вокзале. Она выбиралась из вагона, вся увешанная покупками и для себя и для знакомых дам, широкая, как бы растолстевшая и увеличившаяся, так что к ней и не продраться, не подступиться. И тут набегали знакомые дамы. Они оттесняли его от матери, и каждая снимала с нее свой сверток или пакет со «столичной галантереей». Мать в несколько минут как бы худела у него на глазах. Ему казалось, что ее «разбирали по частям». И то, что оставалось — небольшая тонкая женщина, — это и было оно, самое родное и любимое.
Как-то один из друзей спросил Житкова, уже известного писателя: «Почему вы не написали ничего о своей матери?» И Борис Степанович, помолчав, сказал на это: «Вот всегда так — о самом дорогом никак не сможешь написать, не напишешь!»
Постепенно дом Житковых стал одним из культурных центров в Новгороде. Степан Васильевич был человеком с творческими интересами в своей области знания. Он сотрудничал в народнических журналах. Написал и напечатал несколько пособий и учебников по арифметике.
Учащиеся учительской школы его очень любили, и он оказывал на них большое влияние. Окончившим и уезжавшим на работу в села Новгородской губернии Степан Васильевич сам подбирал библиотечку, преимущественно из книг толстовского издательства «Посредник». Эти книги были, конечно, литературой вполне легальной, и «крамольный дух» сказывался только в подборе книжек.
Степан Васильевич организовал в селах ряд библиотек народного чтения с определенным подбором книг. Эти библиотеки вызывали к себе враждебное отношение властей. Губернатор Мосолов начал закрывать эти библиотеки. В одном из прогрессивных изданий было напечатано, что Житков все открывает библиотеки, а Мосолов все закрывает. После этого и началось гонение на С.В. Житкова в Новгороде.
Царская администрация обратила внимание на большое значение учительской школы для сельских учителей губернии и на влиятельную роль С.В. Житкова в учительской школе. Школу начали «ревизовать». Желая спасти дело от административного разгрома, Степан Васильевич в 1888 году ушел из школы. Но житковский «дух» в ней остался. Через год она была закрыта.
В 1883 году Житковы переехали в Петербург. В Петербурге девочки заболели скарлатиной. Бориса изолировали и отвезли к бабушке. Бабушку свою Борис очень любил. Он рассказал о ней, соединяя правду и вымысел, в одном из лучших своих рассказов — «Как я ловил человечков»: о том, как бабушка запретила ему трогать модель корабля, в которой, думал он, живут маленькие невидимые человечки, как он не послушался, как обиделся потом на сердитое слово бабушки, как убежал от нее в сад и зарылся в снег и как его вечером в снегу нашла собака. Бабушку Житков изобразил и в рассказе «Нюша» и в «Почемучке».
Вскоре Степан Васильевич получил место учителя в Риге, и семья туда переехала. Но министерство просвещения не утвердило Степана Васильевича учителем. Педагогическая карьера для него оказалась закрытой. Пришлось ему подумать о какой-нибудь другой работе.
После неудачной попытки отца учительствовать в Риге Житковы в 1889 году переехали в Одессу. В Одессе жили два старших брата Степана Васильевича — адмиралы, участники Севастопольской обороны (одного из них показал в образе капитана-«голубя» в своем романе «Вокруг света на «Коршуне»» Станюкович). Брат-адмирал устроил Степана Васильевича на службу — кассиром в практической гавани Русского общества пароходства и торговли (РОПиТ). Через некоторое время Степан Васильевич стал работать уже помощником агента РОПиТа (ведал всей деятельностью пристаней).