那細作道：“此乃我家侯爺送給公子的信。”
張飛問道：“你家侯爺是誰？”
細作道：“是羅侯寇銘。”
張飛聞言，沉吟了一下，忽然大驚，道：“羅侯寇銘？他全家不是當年已經被劉賢給殺了嗎？何以如今又突然冒出來了？唔，不對，這是羅侯送給他兒子的信？莫非這信是送給劉封的？”
當下張飛拆開書信，看了一遍，隨后怒喝道：“好哇！好個劉封，居然吃里扒外，暗中與劉賢勾結！若是被你與武關之兵聯絡上，我豈不是腹背受敵？長安也不可保了！”
當下張飛連夜棄了營壘，領兵悄悄往峣關而去。為免劉封生疑，張飛一路隱忍不發，對誰都沒有說劉封之事，心下盤算著：羅侯雖然活著，但劉封卻已經做了陛下的義子十多年，僅憑一封書信不能十足的定他反叛之罪。我且領兵回去，嚇一下他，看他如何應對！不過，卻也須防著霍峻趁我鎮壓劉封之時，出兵前來襲我之后。唔，劉封是知道上雒城的地道已經被我知道了的。我且先回上雒，看霍峻來不來攻打。若是霍峻到來之后，不從地道進攻，那就表明劉封早已暗中將地道之事泄露給了霍峻，那么劉封反叛也就有證據了。
當下張飛領兵一路撤到了上雒。
卻說霍峻次日得知張飛撤軍，當即領兵出關追擊，一路小心翼翼地追到了上雒，隨后建立營壘，并不進攻。
霍峻麾下有向寵所部五千人，申儀所部三千人，以及自己親領的南四郡兵馬一萬二千人，總共二萬大軍。其中六千人在后運糧，在上雒城下的總共有一萬四千兵馬，戰兵人數是張飛的兩倍。
張飛雖然自恃武勇，不懼單挑，但也不愿意與霍峻憑消耗，當下按捺心情，等待霍峻進攻。然而霍峻卻一直在整修營壘，做出一副與張飛長期對峙的架勢，半點進攻的意思也沒有。
當下張飛等了幾天，不見霍峻來攻，又聽斥候傳報，說每天漢軍營寨之中都有信使出營往返于峣關。張飛聞言，心中焦躁，道：“此必是羅侯在與劉封聯絡父子之情，一旦說動劉封，我軍將成甕中之鱉也。”
當下張飛領數百精兵出城來到霍峻營前挑戰，激霍峻道：“你身為劉賢麾下大將，何以如此懦弱！上雒城就在這里，你領大兵到來，卻不敢出戰，既然如此，便該乖乖回去學婦人繡花，何必前來廝殺！”
霍峻聞言，似乎被激怒了一下，沖口道：“張飛，你也不必激我。你自恃知道了我軍在上雒城的布置，因此急于想要以此來大勝我軍。卻不知此事早已被你左右之人暗中告訴于我了。哼，我身為大將，明知有陷阱，豈肯上當？”
張飛大驚，當即領兵退回城中，因知道一番布置已經成空，當下命人堵塞了地道，修補了城墻，隨后暗思道：霍峻已經知道地道之事，可見必是劉封泄的密。當下思前想后，決定派出信使向長安告急，請劉備分兵前來增援自己。