刘璋因为恐惧已经失去了理智，谁的话都听不进，非要回成都不可，否则就要杀人，吴懿和吴班无法劝阻，那帮子文官也无法劝阻。
无可奈何之下，兴平六年正月二十六，刘璋终于得以从阳平关往蜀中撤退。
一路紧赶慢赶，刘璋在二月初二抵达了白水关，回到了蜀中，终于松了口气。
他终于安全了。
刘璋大口大口的喘气，大口大口的呼吸着蜀中甜美的空气。
他只觉得自己像是做了一场梦一样。
有了不符合他的性格的野望，度过了一段极其疯狂的岁月。
天啊，以后就算是死，都不要再离开安全和平的蜀中了。
再离开成都我就是个蠢货！
刘璋如此发誓，然后终于可以安心的沉沉地睡去。
太累了，一连十数日，没有一天睡眠保证在三个时辰以上的，这对于常年养尊处优的刘璋来说，的确是一个很大的考验。
可是吴懿和吴班很不甘心，也有其他部将回过神来觉得不甘心，于是吴懿强烈要求自己带领一支部队留在阳平关观察情况，让吴班护送刘璋回到蜀中，然后镇守白水关配合他。
刘璋答应了，只要能回蜀中，什么都好，于是吴懿留了下来，和杨怀一起率领五千军队镇守阳平关，并未离开，不断派人刺探魏军大营的消息。
在刘璋离开之后的某一日，魏军向阳平关发起了一轮佯攻，攻击力度很弱，很快就被击退了，但是因为魏军的声威赫赫，还是给阳平关守军带来了很大的压力。
打退这支魏军之后，吴懿越想越不对劲。
“若当真是魏公之兵，兵力充足，怎么会只是佯攻而不全力攻打阳平关？阳平关是汉中门户，不乘胜追击拿下阳平关，这怎么也不对劲吧？”
吴懿如此对杨怀说道。
杨怀觉得有道理，他也怀疑这件事情发生的太突然，有太多的疑点了。
于是两人一合计，想了一个夜袭的法子，挑了一群在晚上没有夜盲症的士卒跟着他一起，悄悄的出城夜袭，打了对方一个措手不及，直接放火烧了他们的军营，抓住了一票人，一问，吴懿和杨怀的心都凉了。