如果說覆羅部的背盟使得獨洛水聯盟開始分裂，那麼以同羅部為首的鐵勒聯盟悍然進攻蒙陳部，而獨洛水諸部坐看蒙陳部落敗則使得獨洛水聯盟正式解體。當這個聯盟無法發揮它存在的作用時，它便已經失去了存在的意義。
直到蒙陳部南下，一群驚慌失措的各部首領才突然發現，聯盟既然無法保護蒙陳部，那同樣也無法保護他們，于是各部忙慌慌張張地，開始尋找後台。
同屬于鐵勒人的多覽葛部、阿跌部向鐵勒聯盟靠攏，同屬于突厥人的執失部、蘇農部則向突厥靠攏，至于老東家大隋，早就忘得一干二淨。
這其中唯有渾部，既得罪過同羅部，又與突厥人關系不睦，兩邊都靠不得。
大業八年底，渾部首領渾破六在內憂外患中去世，其子渾阿貪支繼任酋長之位。面對咄咄逼人的同羅部和不斷進犯的突厥人，渾阿貪支力排眾議，決定帶領部落南下投奔大隋。
大業九年二月，蒙陳部南下不到一年，整個草原還未完全解凍，渾阿貪支帶領部落五千五百帳，共計一萬九千人，南下投奔大隋。
始畢可汗聞詢命人在浚稽山（今蒙古國土拉河﹑鄂爾渾河上源以南一帶）對渾部進行阻擊。
渾部士兵同仇敵愾，奮勇當先，渾阿貪支率部在此大破突厥騎兵，然後從容南下。
大業九年五月，渾阿貪支率領四千三百帳，一萬四千余人到達大隋。
蒙陳部和渾部先後南逃，投奔大隋，這是大隋草原戰略的失敗，影響力的減弱的體現。但在虞世基等一眾人的吹噓下，這反倒成了草原胡虜欽慕天子，望風來降的典範。
楊廣因此龍顏大悅，封蒙陳闔為光祿大夫，右翊衛將軍，弓盧侯，安置在九原郡。封渾阿貪支為光祿大夫，左翊衛將軍，皋蘭侯，安置在武威郡。
對于這種狀況，大隋上下還感到形勢大好，疏不知大隋在草原上的釘子被突厥和鐵勒一一刨除之後，對方的下一個目的就成了大隋。
沒了獨洛水諸部對于突厥人的牽制，作為草原突出部位的安北都護府立刻壓力大增。
安北城位于陰山以北，前出九原郡數百里，插入到草原深處。原本大隋實力強大時，安北城控南扼北，把控草原，緊緊地把守著胡人南下的大門。但現在大隋勢弱，突厥人南下的勢頭越來越強勁，安北城便成了首當其沖之地。
安北都護府原本只有一萬余人，守衛孤城，但經過十多年的經營，長孫晟和斛律晟先後在安北城周圍修建了十多個小城，構建了意辛山（今內蒙古四子王旗北境，與蒙古國接界）防線，有民一萬四千余戶，四萬六千余人，軍隊接近一萬一千人。
若是按照黃明遠與長孫晟的設計，沿著諾真水建城，用不了一二十年，磧口以南則盡為漢地。但現在形勢突變，安北城孤懸在外，已經失去了限制突厥人的作用，反而成了大隋的一個累贅。
大業八年四月，斛律晟眼看形勢不對，北方突厥人屢屢犯境，雙方互有戰爭。為了保證安北城百姓的安全，斛律晟下令將安北城除了軍隊的三萬多人送回九原。這些人多是安北都護府官兵的家眷和北來安北城的商人。
眾人此次南下，只能揮淚作別丈夫、兒子、父親。
大業九年三月，也就是渾部南下之時，大隋與突厥人再次在意辛山北發生戰斗，這是大業八年以來最大的一場戰斗。
為了牽制隋軍，方便圍剿渾部，始畢可汗親督三萬騎南下，駐扎在意辛山北。
斛律晟也不勢弱，親自率領精兵五千駐扎在意辛山上，雙方山上、山下對峙。
突厥人屢屢挑戰，斛律晟命各軍堅守不出，消耗對方的士氣。
雙方相持一月有余，各不相讓。斛律晟乃命大將嚴孝武率領一千騎兵，換上突厥人的衣服，分作前後兩隊，趁夜偷襲突厥人的大營。
在距離敵軍五里時，嚴孝武命前隊大聲呼喊，後隊擊鼓響應。突厥軍以為隋軍主力趕到，心中大驚。始畢可汗本就對隋軍膽怯，此時也滿是畏懼，命令各部撤退。
突厥人慌忙北逃，驚恐之中，自相殘殺，死傷慘重。
而斛律晟本人帶領數千騎兵，從側翼追擊突厥人，大破其部，斬首愈四千騎。
意辛山一戰，突厥人大敗，始畢可汗遭到當頭棒喝，其驕縱的勢頭也為之一挫。突厥人內部感受到隋軍實力的強大，也不敢再盲目的擅自尋釁，貿然南下。
斛律晟大破突厥，讓楊廣為之一震。楊廣對于始畢可汗的屢屢侵犯也是不滿，他自以為此次大捷能夠讓始畢可汗清醒過來。
戰後斛律晟被進為正三品金紫光祿大夫，嚴孝武和孫辭煦也被進為正四品朝請大夫。
意辛山一戰雖然大大漲了隋軍的士氣，挫了突厥人的勢頭，但雙方的實力相差極大，安北城被突厥人威脅的大局仍無法改變。
大業九年七月，突厥人卷土重來。隋軍雖然頑強抵抗，再次擊敗了突厥人的進犯，但也損失不少。
無論是南面的豐州總管府還是安北都護府，這幾年因為戰爭的減少，從朝廷獲得的支持大大減少。而對付新崛起的始畢可汗，若是想不靠中央的實力，單憑一州一郡便能得勝，是不可能的。
黃明遠雖然遠在遼東，鞭長莫及，但對安北都護府的局勢也憂心忡忡。安北都護府打一萬場勝仗也滅不了東突厥，但若是敗了一場，則是滅頂之災，仗不是這麼打的。
于是黃明遠上書楊廣，請求將安北都護府的官兵內撤入陰山以南。
安北城是個釘子，也是大隋在草原宣揚統治力的見證，是楊廣「天可汗」的臉面。楊廣本是極不願意放棄這里的。
但楊廣也知曉突厥人的進逼之勢。安北城孤懸塞外，一旦被突厥人攻破，隋軍丟的臉更大，還不如主動放棄。
大業九年十月，斛律晟率領七千安北都護府官兵撤入豐州。至此，大隋經營十年之久的安北城正式放棄，大隋與突厥的邊境再次回到了陰山一線。