Отца не освободили. В письме Эпштейну он не сообщает, как проходил суд и при каких обстоятельствах отпало обвинение в участии в фашистской еврейской организации. Тройка, выносившая приговоры, заседала не в Минске, а в Орше, служившей пересыльным пунктом. Тройка была пьяна в стельку и давала сроки в зависимости от физического здоровья заключенных, имея в виду их использование на принудительных работах. Отцу было 55 лет, здоровье его было надломлено. «А, старик! — сказала тройка. — На вольную высылку!» Это означало минимальный срок наказания — пять лет ссылки с зачетом тюрьмы. Только в связи с этим отпало обвинение в участии в еврейской фашистской организации, по которой ему полагалось бы лет 20-25. Тройка сохранила отцу лишь обвинение в контрреволюционной вредительской деятельности в Академии Наук.
В Орше отца посадили в состав, отправлявшийся в далекий Павлодар в северо-восточном Казахстане. В отличие от того, что он пишет в письме Эпштейну, Ошерович был еще жив и находился в том же составе. Среди выживших по еврейским делам было решено его убить. Он почуял это и удавился полотенцем сам. Таким образом, Ошерович действительно покончил самоубийством, как пишет Эпштейну отец, но не в тюрьме, а по дороге в ссылку.
В конце 1939 года отец попал в Павлодар — областной центр со смешанным русско-казахским населением. Летом 1940 года к нему приехала мать. Я был в это время с детским садом на даче и, оставшись один, очень переживал одиночество. Лишь приятельница матери, воспитательница-еврейка Лия Григорьевна покровительствовала мне и всячески успокаивала.
Вначале в Павлодаре оказалось около 200 ссыльных. Ближайшим другом отца стал доктор Смертенко. В Павлодаре отец передал матери письмо для Эпштейна.
Летом 1940 года отец последний раз в жизни сфотографировался. Он был подавлен, но еще не сломлен. Из Павлодара отец стал слать мне почтовые марки, и это положило начало моему недолгому периоду увлечения филателией. Кто-то рассказал в нашем дворе, где находится отец. Эта новость усердно обсуждалась на дворовых скамейках, ибо ранее полагали, что он расстрелян.
Пока мать ездила к отцу, меня взяла на дачу Рива. Ее муж Израиль Гнесин, по профессии рабочий-обувщик, был родом из Витебска. До революции он был активным бундистом и несколько раз сидел за забастовки. Вступил в большевистскую партию в 1920 году, когда в нее влился Бунд. Он пошел работать в профсоюзы и одно время занимал должность зампредседателя Союза кожевников, председателем которого был будущий ближайший советник Сталина Лазарь Каганович. Израиль забрал к себе домой письменный стол Кагановича после того, как ушел из Союза. Когда Израиль только приехал в Москву, ему было поручено реквизировать имущество богатого еврея-фабриканта, обувная фабрика которого находилась на Пятницкой, возле Серпуховской площади. Впоследствии на базе этой фабрики возник научно-исследовательский институт кожевенно-обувной промышленности. В состав имущества фабриканта входил большой пятиэтажный дом №19 на Большой Полянке. Израиль реквизировал этот дом и поселился в нем сам. Дом этот пошел рабочим реквизируемой фабрики, причем все квартиры были разгорожены на комнатушки. Как провинциал, Израиль решил забраться повыше и выбрал себе пятый этаж. Об отдельной квартире у него не было и мысли. Тогда он еще пользовался палочкой.
В доме было два подъезда: с лифтом и без лифта. Конечно же, хромой Израиль выбрал себе подъезд без лифта. Он стал звать из Витебска своих друзей-приятелей, обещая им жилье в своем доме. Первой приехала к нему красавица Маня Блихман. Еще до революции ее выдали замуж за богатого торговца Мотю, щека которого была поражена огромным родимым пятном. Маня сбежала из Витебска под предлогом поступления в вуз, а сама стала жить с Исроликом. Но тут в Москву явился брат Израиля — Исаак, ябеда и доносчик. Исролик устроил его в своем доме, но Исаак тут же написал донос Маниному мужу.