Произвол Зиновьева распространился и на вчерашних его сторонников, которые еще несколько месяцев назад под его диктовку писали челобитные на Хабарова и грозились выступить его обвинителями в Москве. Среди них были даже такие враги Хабарова, как Степан Поляков, Константин и Степан Ивановы. Теперь они горько каялись перед Ерофеем Павловичем и вместе с ним написали и отдали в Енисейском остроге воеводе Пашкову челобитные на Зиновьева «во многих его обидах, насильствах, грабеже». Пашков челобитные принял. Конфисковал у Зиновьева отнятое им у служилых людей имущество (вероятнее, его часть), опечатал его «в коробье» и препроводил из Енисейска до Москвы с приказным человеком Федором Сидоровым «с товарищи». Последним он настрого наказал отдать коробью и челобитные для подлинного розыска в Сибирском приказе. Енисейцы поручение выполнили. Казну и документы довезли до Сибирского приказа и спасли таким образом хоть часть имущества, отнятого Зиновьевым у Хабарова и его товарищей.
По пути в Москву Ерофей Хабаров видел, что его поход на Амур всколыхнул, заинтересовал и поднял в дорогу десятки и сотни людей. Переселенческая волна захватила Якутский, Илимский, Енисейский, Красноярский и другие уезды. Люди шли на Амур на свой страх и риск, не спрашивая на то разрешения у местных властей. Царская администрация, испытывая постоянный недостаток в людях, препятствовала стихийному переселению, старалась вернуть беглецов назад. Но люди уходили и мелкими группами, и объединяясь в большие отряды.
Один из таких отрядов Хабаров встретил на Тугирском волоке зимой 1653–1654 гг. Через несколько месяцев этот отряд был уже у Онуфрия Степанова и в дальнейшем вместе с ним оборонял Кумарский городок. Здесь же, в Тугирском острожке, Хабаров был свидетелем допроса беглеца, назвавшегося Давыдком Кайгородцем. Оказалось, что он пробирался на Амур с ватагой, но отстал от своих и был пойман. Кайгородец рассказал, что о Даурской земле он услышал в Верхоленске от полчан Хабарова, провожавших в Москву ясачную казну. Из Верхоленска с Кайгородцем пошли в Дауры «без отпуска» 4 служилых человека. По пути на реке Киренге к ним присоединились промышленные и служилые люди, ленские и илимские пашенные крестьяне. Оружие они добыли, разграбив государев казенный амбар. Затем отобрали у приказчика ленских крестьян Василия Скобликова пищаль и пистоли, а у торгового человека Ивана Тюрина — пищаль. Средство передвижения — «дощаник с запасами и товарами» захватили у промышленного и торгового человека Матвея Ворыпаева[60].
Проезжая через Илимск, Хабаров слышал, как воевода Богдан Оладьин жаловался Зиновьеву, что теперь все узнали о путях на Амур. Один из путей — по Олекме, тот, которым ходил Хабаров, а другой через Верхоленский острог, Забайкалье и Шилку, который осваивал Бекетов. «Теми дорогами в прошлом 1653 г., — сокрушался воевода, — из Верхоленского и Илимского острогов и уездов без отпуска сворами служилые с охочими и промышленные люди с пашенными крестьянами побежали в Дауры… И впредь в Даурскую землю с Лены воровских побещиков от побегу не уберечь». Оладьин ссылался на аналогичные жалобы и якутского воеводы Ладыженского, который писал к нему, что в Якутском уезде резко сократилось число пашенных крестьян. Общим выводом воевод было то, что «в Якутском и Илимском острогах и уездах нет вольных и охочих людей, которых можно было бы посадить на пашню, потому что они все вышли воровством в Дауры»[61]. Чтобы как-то приостановить отток русского населения в Даурию, грозивший обезлюдить уже обжитые восточносибирские уезды, воеводы вознамерились в ближайшем будущем учредить в устье Олекмы заставу и на ней ловить всех беглецов.
Во время следования Хабарова через западносибирские уезды к нему неоднократно обращались жители с просьбой рассказать им об Амуре. Он делал это охотно и многих заинтересовал перспективами амурского земледелия, пушного и рыбного промыслов, торговли. Когда через год после поездки в Москву Хабарова в Сибири объявили о наборе добровольцев в даурский полк Пашкова, их много нашлось в Верхотурье, Тобольске, Тюмени, Енисейске. Можно предполагать, что среди добровольцев были и те, кто слышал рассказы Хабарова о Даурии.
Какую-то часть пути Хабаров проделал без Зиновьева. Опасаясь обвинения в неоправданной потере времени на Тугирском волоке, он поспешил вперед Хабарова и прибыл в Москву в начале декабря 1654 г. Поэтому от Томска Хабарова сопровождал служилый человек Милослав Кольцов. Из Устюга Великого до Москвы с ним ехал устюжский пристав Иван Кузьмин с казаками. В середине февраля 1655 г. Хабаров был в Москве.