黃明遠回到鄒山守孝，可這個世界還是要繼續運轉，不會因為某一個人而耽擱，所以東征高句麗之事仍舊如火如荼的進行著。
去年冬季十二月，吏部尚書牛弘在江都去世，時年六十六歲，楊廣傷悼痛惜不已，追贈牛弘為開府儀同三司、光祿大夫、文安侯，謚號叫“憲”。
今年正月，左侯衛大將軍真定侯郭衍去世，時年五十七歲，追贈左衛大將軍，謚號為襄。
今年二月，原納言，民部尚書楊文思去世，時年七十歲，追贈為光祿大夫、尚書右仆射、平舒侯，謚號為“定”。
今年三月，內史令元壽去世，時年六十三歲。帝悼惜焉，哭之甚慟。追贈尚書右仆射、光祿大夫，謚號曰景。
······
朝廷一連串喪了好幾位重臣，再加上黃明遠守孝，整個宰相班子都快沒人了。
楊廣不得不，重新授蘇威為納言，執掌朝政。
自大業三年被貶黜之后，蘇威后來又擔任了魯郡太守。后來楊廣也知道自己是遷怒蘇威，而且朝中沒有蘇威，真沒人替他妥善處置繁雜的朝政，所以楊廣不久召他還京，參預朝政，后授太常卿。此后蘇威行政，更加謹慎，也更加不敢與楊廣產生分歧。
此次被恢復宰相的位置，蘇威和左翊衛大將軍宇文述、給事黃門侍郎裴矩、御史大夫裴蘊、內史侍郎虞世基五人共同參掌朝政，當時稱他們為“五貴”。
楊廣又任命宇文述為內史令，免了他左翊衛大將軍的位置。或許是黃明遠推薦宇文述為帥讓楊廣感到一絲危機，所以他毫不猶豫地剝奪了宇文述的兵權。
楊廣又任命楊義臣為禮部尚書，楊玄感為兵部尚書，衛玄為刑部尚書，樊子蓋為民部尚書。至于吏部尚書則被空缺，而直到隋末，楊廣再也沒有任命吏部尚書。
至于十六衛大將軍，也大多被重新授命。
原右翊衛大將軍楊達晉左翊衛大將軍；
右屯衛大將軍大將軍于仲文晉右翊衛大將軍；
納言蘇威為檢校左武衛大將軍，兼領左武衛；
兵部尚書段文振領左侯衛大將軍；
左武衛將軍荊元恒晉右侯衛大將軍；
東平郡太守吐萬緒晉左屯衛大將軍；
右屯衛將軍麥鐵杖晉右屯衛大將軍；
李景、獨孤覽、來護兒、梁默、崔弘升仍領其軍。