离开后黄药师反而感觉轻松了，在他心里已经什么也没有了，只剩下衡儿一个，他经历了这些，现在只想去看看衡儿，其它什么也没有了。只是当他再次走到那个军营时，已经发觉找不到衡儿了，他没有硬闯，而是明白衡儿的身份既然被知道了，一定会被送回去燕京了。
黄药师想去找衡儿，但衡儿现在可能在路上，他不知道能不能遇上，主要的问题还是，重遇衡儿之后，他可以做点什么吗？他又犹豫了，他刚刚才狠下心离开了衡儿，为什么这么快又把持不住了呢？黄药师犹豫着，又没有了方向，他想念着衡儿，好像已经很久没有见过衡儿了。想着想着，又突然想起衡儿曾经说过，她的愿望，就是希望能和黄药师和桃花岛度过余生！
黄药师终于想到了自己的方向了，无论衡儿会不会再次陪伴着他，他都想为衡儿准备一个安乐窝。桃花岛现在是一片荒芜，但是他可以把它建设成一处真正的世外桃源的！无论衡儿如何选择，就算只有他一个人，他也要准备好这个梦想之地。有了方向了，黄药师重新振作起来，马上向着桃花岛出发了。
黄药师没有多想，直接去庆元府找楚天行的那个叫阿三的手下。然而他问及那些曾经热情地和阿三打招呼的店主，都不认识叫阿三的人。黄药师才提到东雄楚天行，那些人才明白，他找的是陆管家。陆管家可是楚天行的大管家，不单帮楚天行管理府内的一切事务，还经手他的很多生意。所以庆元府的当地人，特别是商人，无人不识他。可能是日月有意给陆管家改了名字的，黄药师也不理这些了，他直接到了楚天行的府第去找陆管家。
楚天行听到有陌生人突然来访，本还以为是什么人，所幸陆管家还记得这个特别的黄药师。楚天行知道原来这个就是黄药师之后，马上把他奉作贵宾招待，可能在江湖上黄药师的名气还挺大的呢，也或者楚天行是看在日月的面子上吧。不过黄药师却一点不领情，其实黄药师这个性格楚天行也早有所闻，也不强留了。他知道黄药师的意图之后，便叫陆管家提供黄药师所需要的一切东西，包括船只和银两等，还想派些人随黄药师去，只是黄药师拒绝了。
黄药师只道谢了一句，就把楚天行的很多东西给带走了。就连楚天行的手下都忍不住过来拦住黄药师，因为他们知道楚天行是个生意人，从来做什么都要算计过，有利可图才做，今天却没有任何条件就把这么多东西给了黄药师，他们如何习惯呢。陆管家又一直把黄药师送到海边，才离去了。
下了东海之后，黄药师又直接冲过那个浅湾，他发现了只要速度够快，那些大鱼还是来不及攻击他的船只的。他很快就回到了桃花岛，也马上动手搭建房子，还要造一个衡儿喜欢的亭子和小花园。虽然黄药师功夫了得，但对于建房子，他还是碰了不少壁，才慢慢有了经验。他知道衡儿很喜欢美景，也打算把那些桃花移植一部分种在屋子的前面。但一连忙了那么几天后，他又担心起衡儿的病情了，虽然她已经比起以前好转很多了，而且又能记住那些曾经用过的药方，但她的身体状况那么差，黄药师怎么能不担心呢。
担心让黄药师难以入睡，他还是忍不住要去看看衡儿，于是又决定放下桃花岛的事，先去找衡儿了。他想到了一个找衡儿的理由，就是曾经答应陆太乙到终南山太乙峰会面的事。他要向他师父北斗仙翁打听治疗衡儿的病的良方。黄药师吸取上次的经验，又架着船向着北面，燕京的方向出发了。他计算着，认为现在的衡儿应该就在燕京，他可以先把衡儿接出来，再前往终南山。
也不知道是黄药师确实经验足了，还是他比较幸运，在海上漂了一天一夜之后，就在北面的某处靠岸了。上岸后，他便向当地人打听，知道已经到了登州府附近，离燕京已经不远了。黄药师没有停歇，他想马上就找一匹快马，赶往燕京，但是却发现在登州府这一带，人迹异常稀少，不要说找快马了，普通的马也难得一见。他只有步行向着西北方向走了几个时辰，天都快黑了，才遇到一个小镇，于是前去投宿。
他随便找了一个客栈就住下了，只想过一夜休息一下第二天一大早就起程，他甚至还想连夜也不休息赶路呢，只是天太黑什么都看不见。第二天一大早，当他要起程的时候，忽然看见镇上的人在围观着什么，本来黄药师不理会这里的一切，但他也必须向北面走，于是经过也看了一眼。
原来是一大堆的难民，正在这小镇旁边经过，可能是他们都太饿都，想涌进小镇找点东西充饥。当然那些官兵在小镇的入口把他们都拦住了，黄药师真的不想去耽误时间，但又看到一个老伯突然间捂着胸口倒下了。他于心不忍，又过来想帮他治疗一下了。他知道衡儿可能会有危险，但眼前的情况，如果衡儿在的话，也一定要他去帮忙的。
那些官兵都纷纷拿出了武器，指着那些难民，想把他们吓跑，但那些难民并没有离去，还围住了他们。官兵们看见，又害怕这些难民突然向他们动手，也准备要开打了，幸好黄药师一下子赶到。他把官兵们都定住了，又扶起那个老伯。那些难民看见都，都拼命挤着进小镇，甚至有些老人小孩都被挤倒了。
“停下来！”黄药师大吼了一声，瞪住前面几个高大的汉子。那些人看着他，都害怕地缩了回去，黄药师抱起了老伯，对他们说：“想吃饭的，慢慢的跟着来，谁不听话的我马上杀了他！”说完左手拿起一把官兵的大刀，一下子把它捏得扭作一团，那些人看见都发出惊叹的声音。
黄药师不想浪费太多时间，他一边帮老伯舒缓一下气穴，又带着那些难民走到几间客栈酒馆面前，拿出银两，让那些老板把能吃的东西都拿了出来。他知道不能够把这些人都安全地带走，天下间这样的事情太多太多了，只是既然遇上了，就要做点力所能及的事。
老伯清醒过来了，知道黄药师救了他之后，感激得直跪下叩着头。黄药师扶起他，又问他发生什么事了，老伯才说出事情的经过。他们本来住在这附近不远的地方，历年的苛捐杂税他们已经生活很困难了。近年来金国因为战争频发，不断地增兵，村里的青壮年男子都基本被拉走了，以至田地都荒废了。一个多月前又因为黄河的水灾，把他们的屋子都冲倒了，留下来熬不了几天，无奈之下他们便集体西迁了。
黄药师也明白为什么这一带人迹会这么少了，战争本来已经摧毁了不少的家庭了，还加上天灾，这里的当地人又怎么会有好日子过呢？他也没有多理会了，这些都不是他能管的了，现在他心里只紧张衡儿，想和衡儿一起离开中原，在桃花岛过他们的日子算了。
黄药师继续赶往燕京，中途没有停歇，当天下午就到了燕京郊外了。然而到了燕京之后，他的心情又沉重起来，他怕看见衡儿正在快乐地生活着，他不忍心带她走。他怕这些天做了这么多的事，都只是白干，自己的一厢情愿。想着想着，他又害怕衡儿已经出事了，于是施展起轻功，神不知鬼不觉地到了城里面。
黄药师四处盘旋，希望能遇上衡儿，但一直到了夜色降临，还是见不到衡儿的影子。情急之下，他又抓了一个太监，询问有关衡儿公主的情况。打探之后，原来衡儿真的回宫了，只是回去之后就再没有什么消息，听谣传说是被元妃软禁在宫中，派了很多宫女守住。黄药师听了，急起来了，想都没有想就马上要去闯衡儿的寝宫。
黄药师带着那个太监，找到了衡儿的寝宫，果然有很多宫女在守住。但黄药师发现了衡儿的宫第有点不同，装饰得格外喜庆，难道衡儿要出嫁了吗？他感觉晴天霹雳。又不想相信，于是又抓来一个宫女，想要向她打听情况。可是，那个宫女看见他的眼神，竟然晕倒了。黄药师又刺激她的穴道使她清醒过来，那个宫女又要拼命地大叫，幸好黄药师封住她的穴道。
经宫女交待，衡儿是准备出嫁了，而且还是要嫁给遥远的大理国当皇妃。黄药师知道，金国肯定是把美胜天仙的衡儿作为工具，嫁给大理国，以此希望大理国能在军事上支持他们。这样的话，宋国就自然被困在中央了。只是大理国一直都向宋国称臣，会不会理会金国这个要求呢。黄药师又想到衡儿的美貌，天下绝无能与她媲美之人，大理国皇帝会不会因此而叛弃宋国也很难说。