众人用了晚膳，两人又谈多时，小龙女、程英、陆无双亦在旁相陪，相聚甚欢。天色已晚，杨过便欲留宿。赵老爵爷手拉杨过，笑道：“天下没有不散之筵席。当此乱世之秋，为防变故，我需即刻返回，筹划西迁事宜。”两人言定日后再会。
送别赵老爵爷后，接连数日，杨过心情起伏不定，心想：“赵老爵爷贵为宋室宗亲，绝不会妄言社稷。当今主弱昏聩，奸相当道，忠臣或遭贬，或阵亡，徒死而已。郭伯伯独力支撑，恐遇危险，我须得相助。今日不同当年，人多无益，我这便一人赶赴襄阳。”
杨过将想法告知三位妻子。程英与陆无双微觉吃惊，却知此乃人之常情，只是尚需大姊发话，两女望向小龙女。小龙女淡淡一笑，道：“过儿，你既已想好，便去吧。”
准备妥当，杨过轻装出行。十二年前襄阳一战后，忽必烈麾下多有旧相识，杨过装扮之后，又在右袖中缝上粗布假臂，不易被外人识破。
杨过心想此去襄阳，必遇元军，不如顺道先探查渭南元朝驻军，此地防备不若襄阳阵前严密，且能事前获悉营帐布局等情况。当下行至渭南，潜入元军营地，四下多方打探。溜出营后，杨过寻思东面道路虽好，元兵却多，当即南下捡小道直奔襄阳。
抵达襄阳周边，已近腊月。方接近襄阳，杨过便觉得有异，眼见城外五六十里之内，到处残垣断壁，一片凋敝，虽有房舍，却不见人烟，城外百姓竟似悉数被元军虏走。更有不少块石建成的小城堡，小股元兵纵马奔驰往来其间，络绎不绝。杨过小心行近，到得城外两里，不禁一惊，暗想襄阳危矣。