Смертью князя Андрея окончилось время Шуйских. Официальная московская летопись говорит, что, погубив «первосоветника», великий князь сослал его брата князя Федора Ивановича и других членов их правящего кружка, – «и от тех мест начали бояре от государя страх имети и послушание». Регентство окончилось, все главнейшие лица, введенные в него великим князем Василием, уже сошли с земного поприща, не было в живых ни Михаила Глинского, ни Ивана Вельского, ни Василия и Ивана Шуйских. Оставались только второстепенные или недеятельные сановники вроде князя Дмитрия Федоровича Вельского и М.Ю. Захарьина. Они не владели волей Ивана. Ближе всех к Ивану были его дяди Юрий и Михаил Глинские с их матерью, бабушкой Ивана, княгиней Анной. Эта семья и получила влияние на дела при великом князе, еще не созревшем для управления. Скрываясь за подраставшим государем и не выступая официально, Глинские совершили много жестокостей и насилий и очень дурно влияли на самого государя. Годы 1544–1546 были временем Глинских, и об этом времени в народе сохранилась плохая память. О Глинских говорили, что «от людей их черным людям насильство и грабеж, они же их от того не унимаху». Выросший и физически окрепший Иван выказывал дурные склонности, мучил животных, бесчинствовал, «собравши четы юных около себя детей», и даже покушался «всенародных человеков, мужей и жен, бити и грабити, скачуще и бегающе всюду неблагочинне». Окружавшие его «ласкатели», то есть Глинские, не только не унимали его, но и похваливали, говоря, что «храбр будет сей царь и мужествен». Пользуясь его склонностью к озорству, они «подучали» его на опалы и казни. Так говорят нам современники. И действительно, в эти годы Иван с чрезвычайной легкостью ссылает и казнит людей, по-видимому, за малые вины, и притом не разбирая, к какому кругу боярскому они принадлежат. Страдают люди стороны Шуйских в той же мере, как их недруги и противники. Всего показательнее судьба Федора Семеновича Воронцова. Выше было указано, что в 1543 году Ф. Воронцова государь «жаловал и берег», Шуйские же его сослали. По смерти Андрея Шуйского государь «опять его в приближении у себя учинил»; а в 1546 году Федор Воронцов был казнен вместе со сторонником Шуйских князем Иваном Кубенским по общему на них обоих доносу, к тому же доносу лживому. Таковы были первые шаги Грозного после уничтожения гласной опеки Шуйских под негласной опекой Глинских. Нет ничего удивительного в том, что кровь и грабежи сверху вызвали бунт и кровь снизу. В 1547 году после больших московских пожаров толпа погорельцев убила одного из Глинских, князя Юрия, и, пришедши «скопом ко государю» в село Коломенское, пыталась требовать выдачи государевой бабки, княгини Анны, и другого дяди Ивана, князя Михаила. Государь их не выдал, и они уцелели. Но имущество Глинских было погромлено, и их людей «бесчисленно побита; много же и детей боярских незнакомых побита из Северы, называючи их Глинского людьми». Этим погромом ненавистной семьи закончилось время Глинских и вместе с тем завершился первый период юности Грозного. Иван перешел в другую полосу своей жизни.