刘武周占领晋阳以后，派宋金刚攻打晋州临汾，临汾随之沦陷。接着宋金刚又攻陷龙门，大军进逼绛州城。
-------
李元吉弃晋阳逃回长安，李渊大怒，对礼部尚书李纲道，“四郎年幼，不通世事，朕才派窦诞、宇文歆前去辅佐。晋阳是大唐的根基所在，精兵数万，粮食无数，他们竟然就这样弃城而去，听说是宇文歆出的主意，朕当斩之。”
------
李纲向李渊进谏，“齐王年少，骄狂不羁，窦诞不加劝谏，还为殿下掩饰，致使失去民心，有今日之败，实是窦诞之罪。宇文歆力谏，齐王殿下不听，他已如实奏明圣上，宇文歆才是忠臣，怎么能杀呢？”
李渊沉思不语，良久才慨然叹道，“如非听公之言，朕差点滥杀无辜。仔细想来，全是元吉的错，窦诞、宇文歆又怎能劝阻得了呢？”
于是，李渊将窦诞、宇文歆赦免，不再问罪。
------
到了十月，河北、山东也传来唐军失利的消息。
窦建德先后攻克相州、黎阳，大败唐军，俘获淮安王李神通、李世勣的父亲徐盖、魏征和李渊的妹妹同安公主。只有李世勣带领数百骑渡沁河逃走。
但窦建德以李世勣的父亲徐盖为人质，劝说李世勣投降，李世勣无奈之下只得也投降了窦建德。
------
此时，山西只剩西河一座孤城，河东也江河日下。
宋金刚攻下临汾后，接着攻下浍州。
裴寂是靠溜须拍马起家之人，性格软弱，无将帅之才。黔驴技穷之下，只得传书河东各州收拢百姓入城。
民心不定盗贼四起，夏县乱民吕崇茂聚众自称魏王，响应刘武周。裴寂派兵讨伐吕崇茂，竟为吕崇茂所败。
李渊只得下诏，命永安王李孝基、工部尚书独孤怀恩、内史侍郎唐俭等率兵讨伐吕崇茂。
蒲坂王行本，也与刘武周相呼应，至此河东也失陷十之六七。
------
眼看山西、河东大势已去，李渊这时才想起了李世民，他写来书信与李世民商议。
李渊在书信中对李世民道，“贼势强大，我军难与之争锋，二郎看是否应该放弃黄河以东，收缩力量全力守卫关中？”
------
李世民看到经自己一手开创的山西、河东几乎损失殆尽，实有痛心疾首之感。由于父亲李渊对自己的忌惮，李世民不便出头，只能眼睁睁看着多年的心血付诸东流。
如今李世民接到李渊的手书，即与房玄龄、杜如晦、长孙无忌商议该如何答复李渊。
众幕僚皆认为，李世民此时当迎难而上，自动请缨，力挽狂澜。
李渊亲自手书垂询，已到了李世民再次出山的时机，想到自己终于又有了施展才华的机会，李世民心中有几分悲怆，同时也豪气顿生。
-------
回到寝殿，李世民将李渊的手书拿给观音婢观看。
观音婢看后，嫣然笑道，“世民阿兄心中作何打算？”
李世民将与房玄龄、杜如晦、长孙无忌商议的情况告诉观音婢。
观音婢幽幽地叹气，“阿婢只所以一直劝世民阿兄隐忍，实则是不得已而为之。不到万不得已之时，你向阿爷说再多，阿爷也不会启用你。”
“阿爷压制你也是出于一番好意，他是不愿看到将来你们兄弟手足相残。”
“假如这次阿爷同意世民阿兄领兵收复山西、河东，世民阿兄定要谨慎行事，不负阿爷所望，只能胜不能败。”
------
得到幕僚和观音婢的支持，李世民表奏李渊，“山西、河东，是开创大唐的根基所在，乃国之根本。”
“河东殷实富庶，是京师的依靠，如果轻易放弃，儿臣怀恨难平。至尊如愿让儿臣率精兵三万，儿臣必扫平刘武周，收复汾、晋失地。”
------
到了此时，除了让李世民挂帅出征，李渊还有其它的选择吗？
李渊御驾亲征吗？他自己也没把握，真是这样他还要带上李世民。
让太子李建成为帅吗？一是不合规矩，二是李渊对他用兵没有信心，一旦李建成失利，会引起朝野震动。
李渊只有一个选择，启用李世民。
------
李渊和朝廷重臣商议领兵出征的人选，李建成已得到幕僚的建议，不可轻言领兵出征。
几位重臣皆无良策，没有人再反对启用李世。
十一月中旬，李渊调集关中所有军队交给李世民统率，让其讨伐刘武周。
为壮行色，李渊亲自到长春宫为李世民送行。
-------
李世民出征之后，李渊返回京师。
返京之时，将观音婢和李世民的所有家眷接回长安太极宫。
李渊只所以这样做，一是担心观音婢等人在长春宫没有照顾，二是怕李世民拥兵自重，他的妻儿都在长安，李世民会更听话一些。