Император и императрица были недовольны принцем, эта новость дошла и до ушей их второго сына, Ян Гуана. Ян Гуан втайне взволновался. Хотя он был коронован князем царства Цзинь и был губернатором Янчжоу, он давно подумывал о том, чтобы отобрать у наследного принца трон и самому стать императором. Теперь, когда у него наконец-то появился шанс, он посоветовался со своим старейшим министром Ян Су и придумал несколько уловок. Ян Гуан знал, что его отец был против экстравагантности и что его мать ненавидела неверных мужчин, поэтому он начал изменения с себя. Когда он был в столице, он всегда носил простую одежду и никогда не носил украшений, а его карета и сопровождающие выглядели еще более скромными. Однажды, когда император Суй Вэнь-ди посетил его в его резиденции, он с удивлением увидел, что в доме мало мебели, его кровать и палатка были старыми, а музыкальные инструменты покрыты пылью. Когда императрица Дугу спросила его о том, где он живет, тот ответил: «Я не смел ослушаться приказа своей матери, жил только с женой Сяо». Императрица ответом осталась весьма довольной.
Однажды Ян Гуан должен был вернуться в армию, и по дороге он зашел попрощаться с императрицей Дугу, и когда они встретились, Ян Гуан не смог удержать слезы, сказав: «Я нахожусь вдали от дома и не могу служить своим родителям, но мое сердце всегда будет обращено к отцу и матери». Императрица Дугу была тронута до слез. Ян Гуан добавил: «Я наивен и глуп, мне не сравниться с моим старшим братом. Но я не знаю, что произошло в последнее время, похоже я обидел его, потому что он всегда игнорирует меня. Возможно, когда-нибудь я умру от его руки». Услышав эти слова, императрица Дугу гневно сказала: «Ян Юн так не почтителен, я дала ему наложницу Юань, а он посмел убить ее и рожать сыновей от плохих женщин. В будущем, когда он станет императором, тебе придется преклонить перед ним колено, я не могу даже думать об этом. Если он угнетает тебя еще до моей смерти, что будет когда я умру, я не знаю, как он будет продолжать вредить тебе!» Ян Гуан был очень рад это услышать, слезы полились рекой.
Затем императрица Дугу посоветовала императору Суй Вэнь-ди упразднить Ян Юна, пока не стало слишком поздно. Министр Ян Су в это же время тоже похвалил Ян Гуана перед императором и императрицей, и у императора Суй Вэнь-ди возникла идея сменить принца. Он послал Ян Су выяснить, чем занимается Ян Юн. Ян Су подошел к входу в Восточный дворец, слуга доложила о приходе посетителя, но Ян Су намеренно не стал входить. Ян Юн долго ждал, прежде чем увидел вошедшего Ян Су, поэтому напряг свое лицо и был очень расстроен. Они не перекинулись и парой слов, прежде чем он отослал Ян Су. Ян Су вернулся к императору и сказал: «У принца убийственное выражение лица, он не разговаривал со мной, поэтому у него могут быть злые намерения. Ваше Величество должен быть осторожным». Император Суй Вэнь-ди стал подозрительным и сказал своим министрам: «Императрица несколько раз советовала мне упразднить Ян Юна, я надеялся, что он изменится. Теперь кажется, что это единственный шаг, чтобы принести стабильность в страну!»
Вскоре после этого император Суй Вэнь-ди объявил, что Ян Юн должен быть упразднен в статусе наследного принца, а вместо него наследным принцем должен стать Ян Гуан. Ян Юн чувствовал себя очень обиженным и пожелал увидеть своего отца, чтобы все прояснить, но был заключен в Восточном дворце, и никому не было дела до него. Однажды, когда он уже не мог больше терпеть, он залез на большое дерево и закричал в ту сторону, где находился император Суй Вэнь-ди. Когда император Суй Вэнь-ди услышал его, он спросил: «Это ли Ян Юн кричит?» Ян Су сказал: «Бывший принц был поражен злым духом, находится в состоянии замешательства, поэтому он беспорядочно кричит». Больше император Суй Вэнь-ди не спрашивал о нем.
Ян Сю, четвертый сын императора, был князем царства Шу и находился в Чэнду. Когда он услышал, что Ян Гуан стал наследным принцем, то был очень недоволен, сказал посланнику, отправленному к императору: «Чем второй брат лучше моего старшего брата? Почему он должен быть наследным принцем?» Когда про это узнал Ян Гуану, он попытался проучить Ян Сю как следует, поймав его на ошибке. Сам Ян Сю был безнадежным, он думал, что никто не может контролировать его в Чэнду, поэтому он делал много вещей, которые угнетали людей, нарушал правила, жил так, как сам император. Ян Гуан послал человека провести расследование и немедленно все доложил императору Суй Вэнь-ди, император приказал привести Ян Сю в столицу для допроса.