黃明遠安排人查賬，便是針對的李渾。
李渾這個人雖然出身好，但為人豪奢又貪婪，俗稱「要錢不要命」，不可能不對軍需下手。黃明遠先將其打個半死，使其無力干涉左武衛中事務，然後直接如雷霆萬鈞之勢之勢拿下後勤軍吏，再各個擊破，配合查賬的賬房，很快就將左武衛查的一個底朝天。
對于李渾，黃明遠處置不了，但其他人卻能全部清掃干淨，使得李渾在左武衛徹底失了爪牙。
而與此同時，郭衍看著黃明遠的霸道，根本無能為力。
黃明遠用極度霸道激烈的手段從李渾、郭衍二人手中奪得了左武衛的主導權，期間黃明遠憑借赫赫凶名，無人不畏服。
連李渾、郭衍都敗了，中下層的官員紛紛倒戈。
達奚暠、獨孤盛、段文操等人皆積極向黃明遠靠攏，整個左武衛至此如臂使指。
因為黃明遠背靠楊廣，直通天庭，因此眾人連激烈的反彈都折騰不起來。李渾瀆職、違令、貪污等數罪並罰，被楊廣狠狠地斥責一番。李渾心中滿是委屈，但上一堆屎，根本無法反擊。
至此李渾在左武衛成了過去式。
黃明遠掌軍之後，便將手直接伸到下屬各驃騎府，而將兩個副將給掛了起來。
黃明遠以李渾管理後勤失職，乃命郭衍負責軍中後勤。不過黃明遠在後勤部門安插了數名賬房管賬，又定期查賬。如此布置，郭衍根本做不得什麼手腳。
而李渾則被黃明遠任命管理內務和軍政，不過內務諸事有長史竇威負責，竇威自不可能放權。軍政有司馬司馬陳遠負責，再加上黃明遠壓制，李渾對于內務和軍政諸事皆插不上手，直接成了一個擺設。
既然李渾要架空自己，那自己先將李渾架空。
現在徹底掌握了左武衛，黃明遠開始更進一步的練兵。
黃明遠通過整頓左武衛打到了李渾，不過其主要目的還不在李渾。否則黃明遠也不會如此大動干戈，李渾在黃明遠的眼中還沒那麼重要。
主要是之平定南陳之後，京中禁衛十余年未曾征戰，實力下降較大，戰力遠不如從前。而事實上到了隋末，大隋王朝根本指望不上十二衛府禁軍。
黃明遠已經準備將左武衛打造成自己在京中的基本盤，自是不會在放任這股力量逐漸腐敗化。黃明遠通過這一輪大練兵，成功將一些舊部打入左武衛內，又清理了一批老弱病殘和無能之輩，左武衛的戰力雖然沒有什麼實質上的提高，但至少精氣神已經能冠蓋十二衛。
不過這還不夠。
黃明遠又親自制定了相對符合左武衛的訓練方案，提升了訓練標準，逐步提升士兵的戰力。
這可苦了左武衛這群老爺兵了。在此之前，左武衛如其他部隊一般混日子。而且因為李渾為人更加貪腐，因此剝削士兵也很，左武衛更加混亂。現在黃明遠以對待邊軍的標準練兵，怎能不要了眾人的命。
幸好黃明遠清理了後勤，大幅提升了士兵的伙食待遇。而且因為軍中清理了不少官吏，左武衛第一次有這麼多的職位供人晉升。眾人情緒紛紛高漲，熱情也多了不少。
為了完全調動士兵的積極性，黃明遠將軍中空缺的火長、都督等低級職位拿出來供士兵公平競爭，強者得任。
這更是讓全軍吃驚。
實際上黃明遠在左武衛並沒有什麼心月復，哪怕自己任命也沒有合適的人。而公平競爭，反而給了底層士兵機會。而這些成為火長、都督的人也全都成了黃明遠的擁護者。
黃明遠又以手中狼牙精騎為標桿練兵。
軍中更重實力與威望，黃明遠以力破巧，威壓全軍，基本上得到了全軍的認可，初步掌握了左武衛。
不過黃明遠暢快了，兩個被黃明遠掛起的副將郭衍和李渾的日子就別提多難過了。
郭衍有心向黃明遠示弱，卻拉不下臉來，而隨著黃明遠對左武衛掌控力度逐漸加大，郭衍已經成了軍中可有可無之人。
郭衍的兒子太子左監門率府司馬郭臻听聞此事之後，力勸父親與黃明遠修補誤會，重歸于好。
眼看父親臉上滿是猶豫之色，郭臻向父親問道︰「若問盛寵，大人與魯國公疏重？」
郭衍默然道︰「他與太子、太孫皆親密無間，吾雖得太子看重，卻不如黃明遠也。」
郭臻又問道︰「若論官職，大人與魯國公疏高？」
郭衍有些不高興，只得說道︰「他為大將軍，吾為將軍，吾亦不如黃明遠也。」
郭臻卻不給父親面子，步步緊逼道︰「再論未來，大人與魯國公疏廣？」
郭衍長嘆一聲，說道︰「他是初生之驕陽，吾已是黃昏之落日，萬難以與黃明遠相提並論。」
郭臻乃說道︰「既是如此，父親又如何與魯國公一較長短。」
郭衍驟然大驚，如夢方醒，這才說道︰「正是此理，若非大郎提醒，吾至大謬也！吾不如汝多矣！」
人家黃明遠的未來根本就不是自己可比的，為子孫後代計，也不應該在此得罪黃明遠，沒看到楊素不都與黃明遠交好嗎？
郭衍遂決心負荊請罪，與黃明遠重歸于好。
打定主意的郭衍很快便向黃明遠請罪示好，以求修補關系。對于郭衍的示弱、求饒，無論是真是假，對方畢竟是長輩，黃明遠自是不會盛氣凌人的對待郭衍。
雙方兩杯水酒，一笑而過，二人勉強恢復了彼此的關系，但雙方之間的裂痕，尚需時間找補了。
沒了郭衍的配合，李渾在左武衛內更是孤立無援。
歷史上在仁壽四年，李渾刺殺李筠而代其位，成了李家的家主。不過在這個時代，黃明遠曾提醒過李筠小心刺客，因此不知是不是黃明遠的提醒管用。反正李筠沒有被刺殺，李渾自成不了李家家主，其地位也就一般。
此時李渾在左武衛扛了半月，實在是寸步難行，最後李渾無奈，遂請假在家，再不赴左武衛軍中。
解決了左武衛的內部關系，黃明遠便又閑暇起來。每日在兵部、左武衛、東宮，都不過點卯的事情，一來二去，黃明遠倒是獲得了一個不戀棧權力的美名。牛弘等人更稱贊黃明遠知進退，守臣節，有古之名將王翦、衛青之風，堪稱賢字。