至于那些在蒲州城下，给窦世忠放回家中的万余叛军士卒们，也是起到了可怕的作用，因为这些人打仗不行，瞎咋呼的本事，却是比谁都强，他们回到了乡里之后，到处都说什么朝廷天军，是如何的可怕，至于那个领头的杨玄感，简直成了三头六臂的战神再世了。
到了最后，这些流言非但没有停下来，反倒是越传越凶，十几天内就连晋中晋南，这一块杨谅经营多年的老巢，都是给弄得人心惶惶，征调上来的军队连计划的一半都没有，不少村子是全村逃亡到山里，以避免给汉王杨谅当炮灰，更是有些州郡开始和朝廷私下接触，准备谈判投降的事了。
杨谅无奈，只得再次离开晋阳城，率领六七万亲卫部队，到晋南介州一带宣示军力，妄图稳定人心，临走前留了自己的王妃豆卢氏的哥哥豆卢毓和将军朱涛，还有长孙晟的长子，长孙无乃共同守城。
让汉王杨谅万万没有想到的，却是这个豆卢毓，没有想到他竟然是个吃里扒外的白眼狼，他看准了杨谅起兵不得人心，早就倒向了朝廷，而且这人是个胆大心黑的主，不仅不单骑回朝投奔杨广，还留在晋阳城里玩起了无间，杨谅前脚刚走，他后脚就杀了忠于杨谅的将军朱涛，还和长孙无乃一起，一同把大牢里的皇甫诞给放了出来，三人一下子夺取了整个晋阳。
可惜豆卢毓等人，还是低估了汉王杨谅，在这晋阳城里经营多年的势力，就在他们晚上动手杀了朱涛之后，连夜就有死士从晋阳城逃出，第二天一早就赶上了出城不久的杨谅，然后把晋阳生变的消息传到。
杨谅此时再也顾不得，大费周章去搞什么武装大游行，以宣示并州军的军威了，直接下了军令，让全军立即后队变前队，前队变后队，急行军赶回了晋阳，豆卢毓和长孙无乃还在做张榜安民的工作，怎么也没有料到，汉王杨谅来得如此之快，此时的他们，就连城防军的将领们，都还没有来的及布置。
当豆卢毓跑到城南的城头时，杨谅已经带着自己的先头骑兵赶到了城下，一想到自己的老婆孩子，已经落在了别人的手里，杨谅这回爆发出了惊人的潜力，居然冲在了所有人的最前面，结果就是负责守南城，而临时雇佣来的胡人士兵们，都还没有认识杨谅，豆卢毓趁机哄骗大家说这是贼军，于是守军箭如雨下，杨谅差点给直接射成了刺猬。
杨谅眼看南门走不通，转走西门，这一回西门的守军，都是汉人，而且他们都认识杨谅，守门的军官还是忠于杨谅的一个死党，见状之后，马上把杨谅的大军放进了城，这回轮到豆卢毓﹑长孙无乃和皇甫诞三人倒霉了，一个都没逃掉，都成了汉王杨谅的刀下之鬼。
只是此事一出，汉王杨谅就被吓得，再也不敢离晋阳一步，除了派来四万援军催促乔钟葵和裴文安二人，迅速打通代州外，什么事也不做，就是坐拥着最后的二十万军队，在晋阳等着自己这一脉的末日来临。
裴文安想到这里，默默地长叹一口气，他想不到这次计划周全的起事，怎么一下子成了这副模样，这才不过一个月，在继奇袭关中的计划失败后，分兵征略四方的计划也失败了，而南下江南的计划，又是早早地给自己破坏，现在连晋阳城都有人谋反，可见人心的向背，这场战争的结局，看来已经是不言而喻。
想到此处，裴文安的眼神之中，突然变得凶狠起来。重新又充满了斗志，他心底里的一个声音，正在吼叫道：不，我还没输，只要打通了代州，只要能跟那些突厥联系上，那一切皆有可能，只要别让乔钟葵这个笨蛋，再这样瞎指挥，用我的办法一定能攻下这代州城！