楊氏當滅李氏當興的傳聞傳出後不久，李淵就得到隋煬帝楊廣讓他返回長安的命令，李淵好險沒嚇死。皇帝楊廣那可是絕頂聰明的人物，他肯定猜出來了，有關楊氏當滅，李氏當興的政治謠言，就是我李淵瞎編出來的。倘若去了京師，只怕我的腦袋……
心裡害怕，李淵咕咚一聲，倒在了床榻上，哭著對使者說道：兄弟，你看我，都病成這樣子了，能不能活到明天，我自己心裡都沒數啊。不是我抗旨不遵，我是擔？自己一旦奉旨動身，還沒出家門，就死蹺蹺了。兄弟你能不能幫我一個小忙，回去跟皇上說一說，就說我病得真的厲害……
使者無奈，只好回去告訴楊廣，李淵病情嚴重，無法奉旨來長安。楊廣聽了，半信不信，就去找在宮裡出任女官的李淵外甥女，問她：你舅舅為何不肯來長安？李淵外甥女回答：興許是病情比較嚴重吧？
楊廣冷笑：恐怕是心病吧？
外甥女急忙寫了密信，告訴李淵這個消息。收到信後，李淵是真的病重了。這時候他最想做的，就是和妻子竇氏商量商量，？是此時竇氏病危，李淵只好把事情憋在心裡，不敢說出來。
不久，竇氏病疫。李淵悲痛不已，自思娶了這麼好的一個老婆，卻因為自己不聽她的話，以至於落到了如此危險的境地。從此他採用韜晦之計，故意放縱聲色，還收取下屬的賄賂，表示自己絕無雄心壯志，如此到了大業十三年，楊廣傳旨，任命李淵為太原留守。
接到聖旨的當天，李淵將四個兒子李建成，李世民，李元霸及李元吉叫過來，流著淚對他們說：你爹好笨啊，當初不肯聽你媽媽的話，否則的話，我早就得到今天這個機會了……
區區一個太原留守，對李淵來說，預示著什麼機會呢？
原來，當地的居民，都是古帝陶唐氏的舊民。所以太原之地，又稱之為唐，而李淵世代爵封唐國公，正是將太原做為李氏的封地。所以李淵回來這裡，就如同飽受欺凌的遊子回到家鄉。所以李淵認為此地必將成為他的龍蜇之地，只待休養生息，一飛沖天。
但楊廣把李淵回到封地，卻不是讓這廝休養生息來了。楊廣交給了李淵一個重要的任務，命令他兵出太原，與馬邑太守王仁恭合兵，北上鎮守邊疆，對付來犯的突厥強敵。
北部的胡人，始終是中國的大患，所以楊廣為了幫助李淵完成使命，還專門調撥了河東的一部分兵馬，隸屬李淵的麾下。就這樣，河東兵，李淵自己的兵，再加上馬邑太守王仁恭的兵，三個方面軍加起來，是一個怕人的數字。
到底是多少人？
差一點不到5000人。
5000人對付胡人……怎麼會三個方面軍湊在一起，人數還這麼少呢？
這是因為，楊廣要留一手，李淵要留一手，馬邑太守王仁恭也不傻，當然也要留一手，三方面一人留一手，居然還能夠湊出來5000人，這已經夠意思了。
發現自己這邊將寡兵稀，王仁恭有點上火，就說：昔者漢將軍霍去病封狼居胥，所率精兵兩萬，戰馬十五萬匹，才逐得匈奴北走。如今咱們才不過是5000人，還不夠人家匈奴喝一壺的……不知道李大人有何計較啊？
李淵硬著頭皮說：情況是這個樣子的，現在皇上遠在江南，還寫詩曰：我夢江都好，征遼亦偶然，但存顏色在，離別只今年。皇上果然是天縱英武，這詩寫得賊啦啦好……我的意思是說，咱們這裡才5000人，又駐紮在這麼一座荒城，內無糧草，外無援兵，隨便一夥胡人流浪漢，都比咱們人多……不知道王大人有何計較啊？
王仁恭慘笑道：我正是沒有主意，才詢問你，你卻反過來問我。
李淵道：哦，原來你沒有主意……你沒主意，我也沒有主意……要不咱們這麼辦，咱們乾脆投降胡人得了。