李渊用一番空话把李密夸得飘飘欲仙，实际上，既没有同意与李密共同推翻隋王朝，又没有答应与其相会。然而，就是这些空话让李密喜出望外，他把李渊的书信交给手下看，说道：“唐公如此，我不需要费多大劲就能平定天下了。”从此双方书信往来不断，而李密也把注意力全部集中在东都一点，无心经营其他方向了。

霍邑前线。

淫雨连绵，一直没有停下的迹象，李渊军中粮食逐渐短缺，而刘文静还没有回来，又有人传说突厥与刘武周趁虚南下，偷袭晋阳，这令李渊坐卧不安——一旦晋阳失陷，前有强敌，后无归巢，很快就会覆亡。想到这里，李渊召集众人商议率军暂时返回晋阳。李渊先说：“以天道协助我来看，应该没有这事，但以人事见机而作上判断，则什么情况都会发生。”裴寂等人的意见也是这样，裴寂说：“宋老生、屈突通南北联络，扼守险要，一时难以攻下。李密嘴上虽说与我联合，但内心奸诈，不可相信。突厥贪婪，不讲信用，唯利是图。刘武周对突厥人又是唯命是从。太原乃一方都会，将士家属都在那里，不如回师解救根据地，以后再说。”

李渊对李建成、李世民说：“你们的意见呢？”

二人回答道：“刘武周志得意满，突厥贪婪寡信，他们之间表面上虽然是同盟，但却貌合神离，内心实际上相互猜疑。就算突厥贪图太原，岂肯置眼前的马邑于不顾！刘武周对此也是心知肚明，一定不会与之一心。另外，朝廷听说我们举兵以后，自顾不暇，京师留守一般人都非常害怕我们，因此，精兵猛将都派到了这里。如今如果回师，各军不明就里，相互惊扰，必然会生出意外，而军营内外全是劲敌，如此一来，突厥、刘武周会一齐前来，宋老生和屈突通也会尾随而至。勇往直前，将胜利在望；畏敌退缩，就会一败涂地。如今遍野都是庄稼，不用担心乏粮，一直前进，就会不断壮大我们的军队。李密顾恋他夺得的粮仓，无暇进取关中。宋老生轻率急躁，一战即可将其生擒。奠定大业，在此一举。起兵原本是为了大义，奋不顾身以救苍生，当先攻进长安，号令天下，如今刚遇到一个小小的敌人，就立马班师，我恐怕从义之士会立马解体，返回太原一城之地，不过是当个强盗而已，将如何善后！众人贪生怕死，眷恋家属，就是所谓的说空话的人；儿等舍命苦战，就是所谓的身体力行的人。耕田织布自有其人，不用去问别人的意见。等到雨停之后，如果杀不死宋老生、夺下霍邑城，儿等请求以死谢罪！”

但李渊却不从，当即下令各军动身北返。

等到李世民又想劝谏，但天色已晚，李渊已经睡下了。李世民进不去大帐，就在外面嚎啕大哭，哭声传到李渊的帐中。李渊听到后，就派人把李世民召入大帐内，李世民说道：“如今部队是举义而来的，一往直前则胜券在握，一旦后退就会人心涣散，人心一散，敌人在后面追杀，很快就要死亡了，岂能不悲哭啊！”李渊顿时醒悟，说道：“部队已经出发了，该怎么办呢？”李世民回答：“我的右军虽然戒严了，但还没有出发，左军出发了，但也没有走远，我请求亲自前去追回。”李渊笑道：“我的成败全在于你，不用多说了，你就看着办吧！”当晚，李世民遂与李建成一起分道把已经出发的左军又追了回来。

七月二十八日，粮食也从太原运来了。

八月一日，天气放晴。李渊指着霍太山说道：“这山神的话还挺灵验。”遂命人前去拜祭。

八月二日，李渊下令全军暴晒铠甲、行装。

八月三日清晨，李渊的军队沿着东南山麓的小路直取霍邑。出发时，大雾弥漫，不一会儿，天气就变得非常澄净。李渊对李建成和李世民说：“今日之举，全在你们二人。景色如此，上天似乎在帮助我们。我唯恐宋老生会胆怯不战，闭门固守，那该如何是好呢？”

李建成和李世民说道：“宋老生出身寒微，勇而无谋，只是凭借着讨捕小盗，才赢得一些名声。如今，他被派到此地，一定受到了朝廷方面大量的赏赐，如果不出战的话，一定会被朝廷处死，我以轻骑前去挑战，不怕他不出战。如果他真的固守不战的话，我们便可以污蔑他与我们暗中交结，此人没有什么见识，他的手下也都是些凡夫俗子，他们之间必然会相互猜忌，也一定会向长安密报，甚至会把宋老生的人头砍下。没有见识的人想到这里，肯定想以积极出战来表白自己，以此判断，他肯定是会出城与我交战的。”

李渊说道：“宋老生未能前来贾胡堡迎击我军，我就知道他没什么作为了。你们二人要认真筹划，务求周密。”他先派柴绍来到霍邑城下侦查，柴绍复命道：“宋老生不过是一介匹夫，我军到达后，他必然出战，一举可以将其生擒。”