Между тем Хрущёв Н.С., сосредоточивший всю власть в своих руках, начал беспардонный разгон старых кадров, в том числе и в Министерстве внутренних дел, назначая преданных ему партийцев на ключевые посты. По своему трагизму дальнейшая служебная стезя наших отцов стала во многом схожей. В 1956 году Круглов С.Н. был смещён с должности министра внутренних дел и как бы откомандирован (с сохранением воинского звания генерал-полковника) в Министерство строительства электростанций. Но через год его уволили в запас и отправили «в ссылку» в Кировский совнархоз. В этом же 1957 году Богданова Н.К. обвинили в нарушении «социалистической законности», но отцу удалось тогда доказать свою правоту. В 1958 году Круглова С.Н. освободили от работы в Совнархозе в связи с переходом на инвалидность, но не разрешили вернуться в Москву. В 1959 году Богданова Н.К. по прежним обвинениям сняли с должности заместителя министра по служебному несоответствию. Круглова С.Н. в это время исключили из партии и полностью лишили пенсии от МВД. Богданову Н.К. также внесли «ограничение в пенсионное обеспечение» и исключили из партии. Через несколько месяцев Богданову Н.К. удалось восстановить своё членство в рядах КПСС, но вопрос о партийности Круглова С.Н. так и не был решён положительно и в дальнейшем. С 1960 года Николай Кузьмич стал работать в Управлении отделочных работ Первого строительно‑монтажного управления Министерства среднего (атомного) машиностроения. Сергей Никифорович, имея инвалидность второй степени, продолжать постоянную работу не имел возможности.
Но жизнь продолжалась своим чередом. В 1963 году Ирина Круглова вышла замуж. Двух своих сыновей, Сергея, а затем Дмитрия, она производила на свет в Роддоме № 6 имени Крупской Н.К., где встретилась и по-доброму общалась с моей мамой, работавшей в ту пору в этом «богоугодном заведении» врачом, акушером-гинекологом. Естественно возникшие женские и детские проблемы, по которым Нина Владимировна с удовольствием консультировала молодую мамочку, имели живой интерес и установили между женщинами долголетнюю тесную связь.
Взаимное внимание и поддержка между старшими Кругловыми и Богдановыми, а также детьми, сохранялись до последних дней их земной жизни, а с более молодым поколением внуков уважительные отношения продолжаются и сейчас.
Сергей Никифорович являлся единственным представителем от высшего руководства Министерства внутренних дел, пришедшим в 1972 году, вместе с дочерью Ириной Сергеевной, проводить Николая Кузьмича Богданова в последний путь.