很快黃明遠就顧不得義成公主的事情了，因為朝廷之中，爆發了一件大事，天子下令，罷免宰相蘇威，誅殺高、賀若弼、宇文弼等人。
楊廣北上之時，便下詔征發男丁一百余萬人修築長城，西起榆林，東至紫河（即今內蒙古南部、山西西北長城外的渾河）。尚書左僕射蘇威勸阻，楊廣不听。這條路修築了二十天便完工，死傷無數。
這便是高等人要被誅殺的直接原因。
因為高的主動投誠，楊廣在登基之後，還是很優待高的，不僅任命其為太子太師，與楊雄、楊弘等人並列，還恢復了其爵位齊國公。
不過高似乎還沉浸在楊堅的時代，對楊廣的性格並不完全了解，因此對于楊廣的作為，屢屢勸諫。
楊廣征召全國周、齊、梁、陳等朝樂家子弟為樂戶，從六品以下到庶人，有擅長音樂的，全向太常寺報到，高對此對不以為然，認為這是亂政，勸楊廣廢止，但楊廣不听。
此時的高似乎因為年老和離開政治中心，已經喪失了政治警惕性，因此他之後對太常丞李懿說道︰「北周天元帝因為好樂而亡國，殷鑒並不遠，怎麼可以再重復呢？」
而這兩年，楊廣的種種作為，也越來越讓高不滿，因此高竟然和安德王楊雄說道︰「近來朝廷太無綱紀了。」
這一次楊廣召見啟民可汗，黃明遠、長孫晟皆對楊廣對胡人厚賞不滿，但也沒有說話，但高卻認為楊廣此舉不妥，對啟民可汗的待遇過厚。他又對太府丞何稠說道︰「這個胡虜很清楚中國的虛實，山川的險易，恐怕會成為後患。」
不僅如此，高還和楊諒的舊部禮部尚書宇文弼走得迫近。須知禍從口出，從高管不住嘴開始，他的下場已經注定。
宇文弼也不知是不是知道楊廣對其虎視眈眈，卻與高私下里說道︰「周天元帝的奢侈，以今天的情況與之比較，也不算太過分吧？」後來又說「修長城的工程，幸而不是急迫的任務。」
如此種種，早有人上報給了楊廣。
七月二十五日，楊廣下令，捉拿高和宇文弼，滿朝皆驚。
二人一個太子太師，一個禮部尚書，雖說都沒有多大的實權，但皆是前朝老臣，地位崇高，身份貴重，影響深遠，因此被逮捕之後，朝臣紛紛上書求救。
光祿大夫賀若弼也上書進言，請求天子明察，沒想到有人上告賀若弼也私下議論宴請啟民可汗的規模太奢侈。楊廣遂把賀若弼也抓了起來。
賀若弼之父賀若敦因口出怨言，為北周晉王宇文護所不容，逼令自殺，臨死前，曾囑咐賀若弼說「我想要平定江南，然而現在看來已經不能實現了，你應該繼承我的遺志。還有我是因為嚼舌根而遭致殺身之禍的，你不能不好好想想啊。」並用錐子把賀若弼的舌頭刺出血，告誡他要慎言。
之後賀若弼因伐陳之功，變得越發驕縱，自命不凡，在朝廷之上屢屢大放厥詞，數次被貶官下獄。這一次，他終于又倒在了這張嘴上。可惜楊廣不是楊堅，不會輕易放過賀若弼。
賀若弼是軍中僅存的名將，威望顯著，他的被捉，使得眾人明白楊廣處置高的決心，因此再無人敢進言。
七月二十八日，楊廣以誹謗朝政的命令，下詔賜死高、宇文弼、賀若弼等人。163TXT
雖然黃明遠知道歷史上楊廣曾下令賜死高等人，可因為黃明遠從中調和，楊廣與高的關系相較于歷史上已經改善了許多，因此賜死令下來，黃明遠大吃一驚。
原本黃明遠以為並無大事，因此並未替高求情，但現在卻是坐不住了。楊廣要殺別人，黃明遠自是管不著，但高不一樣，他對自己來說就像半個老師一樣，而且還是弟弟黃明襄的老師，于情于理，黃明遠都不得不出手相救。
這時不少人都來到黃明遠的營帳，請求黃明遠能夠向天子建言，饒恕高。眾人之中，有清流之士，有高門大族，也有楊廣舊臣，但所有人都知道，若是有人能夠救高在，只有黃明遠一人。
黃明遠並沒有同意，而是將眾人一一勸走，黃明遠有心替楊廣求情，但不想讓天子以為他這是挾勢壓人。
送走眾人之後，黃明遠匆匆前往楊廣大帳，路上為陳遠所阻。
陳遠問道︰「主公此去天子大帳，是否是為了替高公求情？」
「不錯！」
陳遠上前伏在地上說道︰「主公萬萬不可前去，此乃無解之局。天子殺心一起，無可阻擋。而主公一旦踏入其中，便會左右為難，顧此失彼，更嚴重者，甚至為天子所厭。」
陳遠擔心黃明遠不明白前去為高求情意味著什麼，因此說道︰「天子要殺高、宇文弼、賀若弼等人，不過是借著由頭清洗當初的太子余黨，主公且看著，用不了多久史萬歲、薛道衡等人也會被處死，無他也，斬草除根。主公現在還覺得自己能夠阻攔天子嗎？」
黃明遠看著陳遠說道︰「仲長，你說得我都清楚，可正因為如此，我才要前往天子那里進言。高公于我，如師如友，更是黃明遠最欽佩之人，哪怕不能成功，我總要為高公之事盡力。」
陳遠拉著黃明遠的腿說道︰「若因此使得天子厭惡，主公不後悔嗎？」
黃明遠說道︰「若是真的如此，我亦無可奈何。」
說完，黃明遠大步流星地離開了。
黃明遠來到楊廣的營帳，早有楊廣的親信太監張成上前說道︰「哎呦喂，衛公啊，你可不是為了高太師的事情來向聖人求情的吧，這兩天來了好多人，引得聖人大怒，昨個都沒有用飯，你可千萬別點火啊。」
黃明遠偷偷給張成幾顆金豆子，問道︰「這兩天來為高太師求情的人有很多？」
「對啊，可都被天子斥退了。」
黃明遠心中了然，便向大帳而去。此時正好遇到出來的南陽公主。
南陽公主瞬間便清楚黃明遠此來的目的，因此向黃明遠搖搖頭，示意不要開口。她已經向天子求情了，但沒有用。
黃明遠沒有回應，而是掀開簾子，徑直走了進去。