武卫将军安吐根不以为然，说：“一小撮毛贼而已，看我把他们刺死，投进汾水。”

高纬一时不能决定，旁边的几个太监插嘴说：“他们主帅是天子，我们主帅也是天子，他们能远来作战，我们为什么就要躲起来当孬种。”

高纬顿时热血上涌，下令填平壕沟，率军南下迎战。

围攻平阳之初，北齐恐怕北周率军增援，所以在平阳城南挖掘一条壕沟，东自乔山，西到汾水，齐军在壕沟以北筑阵。

高纬与冯小怜共骑一匹马，在一个小山丘上观战，两国大军刚一接触，齐军有些后退，冯小怜当即吓得半死，尖叫道：“败了！”

陪在一旁的穆提婆赶紧劝高纬：“皇上快走，皇上快走。”

高纬可管不了许多，立即带冯小怜奔向高梁桥。

开府仪同三司奚长劝阻说：“时进时退，本是战场上的常事，现在大军完整无缺，没有受到伤害，陛下离开大军，准备跑到什么地方，马蹄只要一动，人心立即散乱，以后就不能振作，请陛下迅速回马，安慰军心。”

武卫将军张常山从后赶来，也劝阻说：“军队已经集结，完整无缺，围城部队仍在原地驻扎，没有受到影响，陛下应该回去，如果不信我的话，请派太监前往侦察。”

高纬打算采纳，穆提婆拉了一下他的手肘说：“这话怎么能信。”

高纬不再纠结，带着冯小怜向北逃走，齐军则瞬间崩溃，不战自散，所有军用物资和武器全都抛弃，死伤一万多人，只有安德王高延宗的部队安然回归。

高纬途经洪洞时，稍事休整，正在看冯小怜补妆，忽然听到外面有人高喊：“周军追来了！”于是带着冯小怜继续向北逃亡。

这时二人碰到了从晋阳归来的太监，高纬之前派他去晋阳取皇后穿的制服，准备攻克平阳之后，宣布是冯小怜的功劳，然后册封冯小怜为皇后，谁知世事难料，平阳不但没攻下，自己也落荒而逃。

但衣服既已取来，高纬便让冯小怜穿上，然后继续逃亡，终于安全抵达邺城。

12月11日，宇文邕进入平阳，梁士彦拉着宇文邕的胡须哭诉：“我几乎看不到陛下！”宇文邕也落下了泪。

经过简单休整，宇文邕打算班师，梁士彦拦住马头说：“如今齐军四散逃走，民心已经动摇，趁他们正在恐惧，乘胜进攻，一定可以把他们摧毁。”

宇文邕握住他的手说：“我得到晋州，作为铲平齐国的根据地，如果不能固守，大事就不可能成功，我对面前的事没有忧虑，唯一的忧虑是后方发生变化，你用心为我镇守，大事可成矣！”

其他将领却多数都想班师，宇文邕说：“放纵敌人，会招来后患，你们如果怀疑不能消灭齐国，我就单独一个人前往。”

将领们当然不会让他只身讨贼，只得乖乖听命，追击北齐的残兵败将。

另一方面，高纬也与百官展开讨论，大家一致认为应该减收田赋捐税，免除民间苦差劳役，用以安慰民心，然后集结残兵败将，就在城下死战，也许能拯救国家。

高纬不认同，打算让高延宗和广宁王高孝珩镇守晋阳，他自己逃奔朔州，如果晋阳也不能守，就投奔突厥。

百官一致反对，但高纬却打定主意这么干，于是高层官员纷纷离心，开府仪同三司贺拔伏恩和担任皇宫警卫的亲信官员三十余人，先后投奔北周。

高延宗得知高纬准备投奔突厥，两三劝阻，高纬拒不理会，秘密派亲信先把胡太后和太子高恒送到北朔州。

12月13日，北周大军兵临晋阳，高纬下诏大赦，任命高延宗当相国、并州州长，统率山西各军，告诉高延宗说：“并州交给老哥经营，孩儿今天要远走高飞。”

高延宗哭诉：“为国家着想，陛下一动都不要动，我愿为陛下出力死战，一定可以破敌。”