其實，從並州召回楊廣的決心，楊堅早就下了，之所以拖至今日仍未正式下詔召回楊廣，主要是沒有擇定楊廣繼任者的人選。

達頭可汗降隋後，按楊堅的本意，是想調出鎮西北的三兒子秦王楊俊到並州接替楊廣，出任河北道行台尚書令，並州總管的，可是楊俊不知受了什麽人的挑唆，頭一個明確向自己提出，要出任伐陳元帥，率軍攻滅南陳，堅決不願意坐享其成，到並州接替楊廣。

畢竟是父子之間，兒子既然志不在此，當爹的也不便太過勉強於他，且考慮到西突厥達頭雖已向大隋稱臣，但其麾下收攏了阿波部族的殘兵敗將，論軍力遠遠超過東突厥，楊俊作為出鎮西北的藩王，一時還不宜離開西北，兩下結合到一處，迫使楊堅隻得暫且打消了調楊俊前往並州接替楊廣的念頭。

除此之處，楊堅也曾動過調現在西南益州出鎮的蜀王楊秀北上，接替楊廣的心思，但旋即自已就主動否定了楊秀這個人選:一來楊秀鎮守之西南巴蜀地界緊扼長江上遊，一旦興兵攻陳，必將牽涉西南，楊秀出鎮益州多年，對當地的風物人情都頗為熟悉，留他駐守西南，必將有利於配合朝廷大軍攻陳;二來，經上次楊秀虐待羌人一事(後在元岩等人的輔佐下，還是平定了羌人叛亂)，楊堅心中對楊秀產生了信任危機，不大放心調他到河北與突厥(突厥對華夏王朝的威脅，自非偏居西南一隅的羌人部落可比)打交道。

接下來，就只剩下了最小的兒子——漢王楊諒可派往並州換回楊廣了。

楊諒雖然年僅十三歲，恰和開皇元年楊廣離開父母身邊出鎮並州的年歲相仿，然無論頭腦靈活，還是行事沉穩，都不輸於楊廣，甚至在某些方面還要勝過楊廣當年，派他到並州換回楊廣，倒是比楊秀還要強些。

可是，由於楊廣、楊俊、楊秀等兄弟三人早在六年前就離開父母身邊，分赴各方出鎮去了，這幾年除了早已長大成人，娶妻生子的太子楊勇，和楊堅、獨孤伽羅共同生活(早在楊廣三兄弟相繼離開長安，出鎮各方後，楊諒就被接入宮中與父母同住了)的只有這個最小的兒子了。

五六年下來，撇開楊堅不論，獨孤伽羅對楊諒的寵愛甚至還要超過了楊廣。

於是，當楊堅婉轉地同妻子商量，打算派小兒子到並州換回楊廣時，又遭遇到了開皇元年楊廣出鎮並州前一模一樣的情形:獨孤伽羅舍不得放小兒子離開自己的身邊，去往千裡之外的並州和突厥人打交道。

就這樣，直至轉過年來進入了開皇六年，獨孤伽羅才露出口鋒，勉強答應放小兒子到並州換回楊廣了。

為了讓妻子放心，楊堅特地給楊諒配備了一個堪稱當世無雙的豪華僚屬陣容:從西北調回刀斬阿波可汗的史萬歲出任總領漢王府軍事兼並州行軍總管;冊任現任兵部尚書楊尚希為河北道行台左仆射;冊任司農少卿崔仲方為河北道行台右仆射兼漢王府長史......特別值得一提的是，楊堅還忍痛割愛，將近衛軍中的後起之秀——新任內殿值長的李靖配給了楊諒，充做他的近衛。

不僅如此，楊堅還於楊諒離京出鎮前，破天荒地賞賜下了兩座鑄錢爐給小兒子，準許他任意鑄造“開皇五株”，彌補公私兩用之不足。

就這樣，開皇六年五月間，漢王楊諒率領著他那一套堪稱豪華的僚屬班子離開長安，北上接任來了。

與此同時，身在並州的楊廣自雙管齊下，一面向高連升借鷹傳信，一面又派了裴虔通騎快馬返回長安給老師蘇威帶信，請他將受人陷害的張須陀發落來並州以來，一直對張須陀的生死安危牽腸掛肚，以至到了食不知味，夜不能寐的地步。

哪知，沒有盼到蘇威的回信，卻得到了關內傳來的一個小道消息:父皇即將派漢王楊諒到並州接替自己來了。

楊廣初聞這一消息，還有些不相信父皇會如此迅速地答應自己的請求，傳召自己返回長安，可是緊接著各種消息紛至遝來:有說被皇帝冊任為總領漢王府軍事的就是刀斬阿波可汗的當世第一猛將史萬歲的;有傳說昔日統領宗團驃騎，和清河公楊素齊名的兵部尚書即將被冊任為新的河北道行台左仆射的;還有的傳說皇上破例賞賜給了漢王兩座鑄錢爐，準許漢王在並州不受限制地任意開爐鑄錢的......越傳越逼真，不由得楊廣不信了。

在諸多的消息中，唯一令楊廣感到惋惜的是，他一心要招攏自己麾下的“軍神”李靖竟然被父皇指派給楊諒，作了他的近衛。

傳言歸傳言，一日沒接到朝廷的明發詔旨，楊廣仍不敢有一絲的疏忽大意:劉方潛入突厥境內斬殺高寶寧後，他便下令諸沿邊州府加強戒備，隨時防范突厥尋畔滋事，挑起事端，並授意李徹將關內的兩萬大軍火速調往白道州，以對突厥大可汗牙帳所在地紫河鎮構成有效的震攝，逼使攝圖不敢因隋軍深入其領地內斬殺高寶寧一事而生事造亂。

直至一個多月下來，最終確認了攝圖不得不吞下了這枚自己送與他的苦果，沒有絲毫起兵反隋的跡象，楊廣緊張的心情才放松了下來。

而在此時，從關內傳來了確切的消息，新任河北道行台尚書令、並州總管楊諒已率領一班僚屬離開長安，前來並州赴任來了。

因此前並沒有朝廷下發的詔旨，另行委任自己新的職務，楊廣忖度應由五弟楊諒當面宣諭召自己回京的旨意，當下便盛集手下所有僚屬，由他親自率領著，趕到並州與汾州交界處來迎接漢王一行。

待楊廣率領著王韶、李徹、張衡以及從幽州緊急趕回的行台兵部尚書李雄等一班現任的行台僚屬抵達汾水畔的汾河驛之時，得到前方的消息，漢王一行才剛出了汾州城，要到午後才能來到汾河驛。

楊廣命眾僚屬暫且各自回房休息，自己在驛站的正廳內略坐一坐，也欲回房休息，忽然聽堂外有人來報:“王爺，李渾和裴虔通兩位將軍已到驛站門外，稱有要事當面稟報王爺。”