黃明遠如此閑了近一個月，連楊廣也看不下去了，勒令黃明遠即刻上任。黃明遠眼看再拖不得，這才怏怏地趕到兵部上任。
兵部掌軍籍輿馬，兵部尚書統兵部，職方侍郎各兩人，駕部，庫部侍郎各一人。
隋唐時期的六部尚書、侍郎跟明清時期的六部尚書、侍郎還不相同，隋唐的各部尚書基本上只管方略，更多的是榮銜，具體事務由侍郎負責。而隋唐的侍郎掌一“司”之事，除了吏部侍郎外，其它侍郎僅為正六品上，相當于明清時期的郎中，與后代的侍郎權利、地位大不不同。
此時兵部的四位侍郎分別是明雅、張鎮周、趙文恪、斛斯政四人。其中張鎮周是黃明遠麾下舊部，又管著最為重要的職方之事。其他諸人，也是各司其職。眾人等級差著黃明遠太遠，根本不具有可比性，因此這兵部之事，并不難打理。
黃明遠也樂得蕭規曹隨，并以張鎮周為首，打理兵部，黃明遠也并不多問。
而左武衛這里稍微有點麻煩。
左武衛置大將軍一員，將軍二員，掌宮掖禁御，督攝隊仗。此時的十二衛將軍還沒有總府事，并統諸鷹揚府，禁軍、地方一把抓，所以地位還沒有后來那么高。不過作為中央十二支主力軍的指揮官，其權利、影響力都很大。尤其是十二衛輪值京城，更是天子腹心。
現在左武衛的兩位將軍分別是李渾和郭衍，都與黃明遠關系不怎么樣。李渾自不必說，二人相仇，李渾恨不得對黃明遠除自而后快；郭衍雖跟黃明遠無嫌隙，不過黃明遠年紀輕輕就爬到他的頭上，也是令郭衍不是很舒服。
因此黃明遠的存在，不可限度的抑制了宇文述、郭衍、史祥等楊廣心腹的地位，使得他們的重要性并不如歷史上那么高。
黃明遠孤身到來左武衛之后，眾人的應對很是微妙。李渾對黃明遠根本愛答不理，而郭衍也是私底下抵制，想把黃明遠排擠出左武衛。
黃明遠看到這般場面，有些氣樂了。
老子才是官痞好不好。什么叫官痞，為小吏，必陵其長吏；為人上，操下急如束濕。
想當年老子當小官的時候，都是威壓上官；當上官的時候，更是威懾下屬，什么時候被底下人架空過。眼看二人如此態度，本來不愿意多事的黃明遠也怒了，老子可以不掌權，但你們不能跟我玩陰的。因此黃明遠遂決定拋開李渾和郭衍二人，直接掌握左武衛。
黃明遠決定從下面直接統兵的驃騎將軍開刀，拿下整個左武衛。
左武衛下面有四個統兵驃騎將軍，分別為達奚暠、陰世師、獨孤盛、段文操四人，其麾下共有兵馬兩萬余人。
四個統兵驃騎將軍中，達奚暠與同為關隴世家的李渾最為親近；陰世師與郭衍關系不錯；獨孤盛只忠于楊廣，沒有明顯的傾向；唯有段文振之弟段文操之前在軍中無依無靠，因此第一個選擇向黃明遠靠攏。
當然眾人的傾向也不是絕對的。實際上達奚暠、獨孤盛因為之前的關系，也并沒有與黃明遠交惡的意思。
達奚暠此次代表左武衛領兵北伐，在黃明遠麾下多立戰功；獨孤盛也曾為黃明遠麾下，所以二人也都算是黃明遠的舊部。這時候黃明遠發現自己兩次為帥真是大優勢，不少八竿子打不著的人都成了自己的舊部，也方便聯絡。
黃明遠既然準備對李渾、郭衍二人動手，就不準備玩那種步步為營的路子。黃明遠此時性子急，身為一軍主帥，手握生死大權，要是還弄不了兩個副將，真是笑掉大牙。
第一日入營，黃明遠對于眾人的慢待也不言語，只是隨意地逛了一圈便返回了。不少心大的便譏笑黃明遠無膽。