楊勇死后，蜀王楊秀以及其弟漢王楊諒，被剝奪官爵貶為庶民軟禁于內侍省，后與諸子一起被軟禁，不得與妻子相見。
漢王楊諒不甘束手就擒，便以討楊素為名，在并州起兵，楊廣派楊素鎮壓，楊諒降后被幽禁至死。
隨后楊廣誅殺侄兒長寧王楊儼，又把剩余的侄兒（楊勇諸子）安城王楊筠、安平王楊嶷、襄城王楊恪、高陽王楊該、建安王楊韶、潁川王楊煚、楊孝寶、楊孝范貶到嶺南，在路途中全部被處死。
同時，楊廣也在陸續的清理朝堂，平日里，信奉佛門或是跟佛門走的最近的官員都受到了不同程度的打壓，稍有失職，輕則丟官，重則滿門誅絕。
在即位之初，楊廣便下令修建建造顯仁宮，從大江以南、五嶺以北的奇材異石運到洛陽，又用海內的嘉木異草、珍禽奇獸充實園苑。楊廣命令王弘等人到江南造龍舟及雜船數萬艘，洛陽的官吏監督勞役嚴厲急迫，十分之四五的役丁死亡了，楊廣又下令在洛陽建造天經宮。
西苑方圓二百里，苑內有海，周長十余里。海內建造蓬萊、方丈、瀛洲諸座神山，山高出水面百余尺，臺觀殿閣，星羅棋布地分布在山上，無論從那方面看都如若仙境。
苑北面有龍鱗渠，曲折蜿蜒地流入海內。沿著龍鱗渠建造了十六院，院門臨渠，每院以四品夫人主持，院內的堂殿樓觀，極端華麗。宮內樹木秋冬季枝葉凋落后，就剪彩綢為花和葉綴在枝條上，顏色舊了就換上新的，使景色常如陽春。
池內也剪彩綢做成荷、芰、菱、芡，皇帝來游玩，就去掉池冰布置上彩綢做成陽春美景。十六院競相用珍羞精美食品一比高低，以求得到楊廣的恩寵。楊廣喜歡在月夜帶領數千名宮女騎馬在西苑游玩，他作《清夜游曲》，在馬上演奏。
······
短短幾年的時間，天下民不聊生，烽煙四起。
自大業元年始，楊廣為了開掘長塹拱衛洛陽，調發今山西、河南幾十萬農民；次年營建東都洛陽，每月役使丁男多達兩百萬人。自大業元年至大業六年，京杭大運河開鑿，在開發各段運河的過程中，各地先后調發河南、淮北、淮南、河北、江南諸郡的農民和士兵三百多萬人。
大業三年和四年在榆林以東修長城，兩次調發丁男一百二十萬，役死者過半。總計十余年間被征發擾動的農民不下一千萬人次，造成“天下死于役”的慘象。
有志之士或隱逸，或遁逃，稍微有點眼光的人都知道，大隋，要完了。
眾所周知，隋唐以來的君主大都不遺余力的打擊高句麗，要將他扼殺在萌芽狀態。正是因為高句麗在隋唐以來被打擊的厲害，所以在隋唐之后，高句麗就徹底變成了華夏的屬國，奉中原王朝為宗主國。
而楊廣，正是第一個征伐高句麗的君主。
當然，楊廣也知道自己這幾年來惹得天怒人怒，怨聲載道，為了轉移朝廷注意力，通過對外戰爭，來鞏固自己的帝位。
大隋大業六年，黃門侍郎裴矩以高句麗本為箕子所封之地、今又不遵臣禮為由，勸說楊廣脅使高句麗王入朝。