经过姚黄的开解，杨过的心情不再难受。对于郭靖和黄蓉，他不恨，但却有着怨。客观地知道两人没有错，但自己的父亲毕竟因为他们而死，不可能不对他们有所芥蒂。特别是刚见面时，黄蓉隐约的防备让杨过对她的印象更是大打折扣。不过虽然不喜欢黄蓉，杨过还是钦佩郭靖为国为民的情操。若非杨康的事情，杨过已经将郭靖当成他的偶像了。“侠之大者，为国为民”，深深刻在了杨过的心中。
自这天以后，生活再也恢复不了以往的平静。黄蓉派遣的名为照顾实为监视的丐帮子弟让三个人颇为碍眼，最终，心烦的三个人决定离开生活了数年的窑洞。
“我们去哪里？”杨过和小包子都没有目标。
‘先去塞外玩玩，摆脱那些盯梢的苍蝇。’姚黄早已经有了目标，灵鹫宫！说老实话，姚黄对逍遥派的那些武功可是垂涎三尺，虽然比不上《剑三》的武功高杆，但比起江湖中现有的武功来说可是高明了许多。就算是让天下人争夺的《九阴真经》，在姚黄看来也及不上《小无相功》、《北冥神功》和《八荒六合唯我独尊功》，练了这三种功夫能够永保青春，《九阴真经》能够吗？
“好！”杨过和小包子连连点头，他们对那些无孔不入的丐帮弟子感到厌烦，可是丐帮弟子遍布整个中原，他们到哪里都摆脱不了他们，’姚黄的提议让他们眼前一亮，塞外可不是丐帮的地盘。
三个人简单地收拾了一下，当天晚上趁着天黑，摆脱了丐帮的人，离开了住了数年的窑洞。为了怕他们离开后有人进入搞破坏，小包子将洞外的阵法重新布置了一番，挡不住黄药师这个阵法大师，但挡住黄蓉这个囫囵吞枣只懂大概的半调子不成问题。
三个人的轻功很厉害，在江湖中，除了老一辈几个宗师级人物，就连郭靖也比不上他们。《蹑云逐月》已经被三个人练到了第三重，已经能够短暂地飞上半空，用来赶路的话，那速度可以用闪电轻风来形容。只一个晚上，三个人就离开了江南境界。即便丐帮想要找他们，也想不到他们已经离开嘉兴这么远了吧。
一路西行，最高兴的是小包子，这孩子只在嘉兴城中玩过，哪见识过这么多不同的风土人情？杨过也是如此，他从小生长在江南，从来不知道江南以外地界的风俗是这么得不同。两个人被路上的风景和风俗吸引，行进的速度慢下来。姚黄也不催促，任少年和包子痛痛快快地玩乐，并时不时与丐帮的人玩一玩猫捉老鼠的游戏，让他们无法掌握三个人的确切踪迹。
这一天，到了湖南境界，三个人商量着去参观一下曾经叱咤荆襄的铁掌帮遗址铁掌峰。三个人在铁掌峰中指峰第二指节处发现了铁掌帮历代帮主尸骨所在的山洞，杨过和小包子从《射雕英雄传》的故事中知道了上官剑南的事迹，出于对这位一心为国的英雄帮主的尊敬，三个人合力用一块巨石封住了洞口，不让人打扰他们的安宁。
下山的路上，他们遇到了黄药师，他的身边带着大约三十多岁的女子，傻兮兮的，姚黄知道这就是傻姑，难为黄药师竟然将傻姑带在身边照顾，挺有耐心的。
“你们怎么跑到荆襄来了？不是说你们师傅要你们在嘉兴等他吗？”看到三个孩子，黄药师疑惑地问道。
“还不是你女儿！”杨过不喜欢黄蓉，对黄药师也没有好气，“忌惮我的身份，表面上装做大方地让丐帮照顾我们，实际就是监视，严重妨碍了我们的生活。我们不得不离开嘉兴。”
黄药师问，“你知道自己的身世了？”心中不免有点儿担心，这个少年不会找自己的女儿女婿报仇吧？他可是很欣赏这个少年，但为了女儿的安危，他说不得要对不起少年了。
杨过哼了一声道，“放心，我不会找你女儿女婿报仇。我爹的死可以说是自作自受，上一代的恩怨已经结束，我可不想自讨苦吃。”
黄药师闻言不由赞叹少年心胸豁达，“蓉儿是以小人之心度君子之腹了，她不如你。”
杨过再次哼了一声，傲骄地扭头望天。
黄药师失笑，问姚黄和小包子，“你们准备去哪里？”
“我们要去塞外，姐姐说那里没有叫花子骚扰我们。”小包子对这个风采脱俗的爷爷印象很好，黄药师一问，他就说了实话。
“塞外吗？正好我也想去见识一下大漠孤烟的景色，不如一起吧？”
杨过想要拒绝，姚黄却连忙答应了。
“黄儿，为什么要和他一起走啊？”杨过小声地抱怨。
姚黄笑，‘黄前辈是好意。他担心我们行走江湖的经验不足，所以想跟在我们身边照顾我们。’
“凭我们的身手，用得着他照顾吗？”
姚黄继续笑，‘黄前辈和黄蓉不一样，等你和他熟悉了，你会觉得认识黄前辈是你的幸运。’
“我才不会这么觉得。”
‘拭目以待吧！’
姚黄以前看《射雕英雄传》的时候最喜欢的就是狂傲不羁、重情重义、潇洒写意，正中带有七分邪，邪中带有三分正的黄药师，能够与曾经的偶像近距离接触，姚黄可是求之不得。而且，她还有一个小心思，黄药师与逍遥子同样是文武双全、无所不能、惊才绝艳的人物，桃花岛的武功也与逍遥派的武功有许多相同之处，何不让黄药师学会逍遥派的武功，成为逍遥子的直系传承者呢？
黄药师是不会让粉丝失望的，果然没用了两天，杨过对他的印象就有了一百八十度大转弯。黄药师的博学让杨过佩服不已，而且他发觉自己与黄药师性情十分相投，两个人尽然成了忘年交。
黄药师更加喜欢三个孩子了，不说杨过，姚黄和小包子也很招他喜欢。一路上，黄药师与杨过谈论书法丹青，给姚黄指点医术，教导小包子阴阳五行和奇门遁甲，时间过得飞快，一行人已然来到了天山脚下。
“小丫头，你有目的地引导我们来到天山，不会是为了采天山雪莲吧？”黄药师用看穿一切的眼神注视着姚黄，调笑着说道。
姚黄呵呵一笑，果然瞒不过黄药师，那她就直说了：‘不是采天山雪莲。我师傅提到过，天山上隐藏着一个避世的门派，是北宋年间建立的，现在有可能还存在也有可能没有弟子流传了。我想着到天山去寻找一下这个门派的踪迹。’
“哦？是什么门派？”黄药师好奇地问，见识了藏剑山庄的神秘后，他对隐世门派感兴趣极了。
‘逍遥派。’
“逍遥派？”黄药师眉头皱了皱，似乎想起了什么。
‘您听过这个名字？’
“不止听过，我桃花岛与逍遥派颇有几分渊源。”
‘？？’
“我年少的时候游览各地，曾经在河南的擂鼓山发现一个珍珑棋局。我解开珍珑棋局后发现一个隐秘的山洞，山洞里面藏着许多藏书，上至天文、下至地理、诗词歌赋、书画琴棋、八卦算数、医卜星象、阴阳五行、奇门遁甲、农田水利、商经兵法……还有武功。我在山洞中学习了整整五年才造就了日后的黄药师。而山洞的主人则自称是逍遥派门下苏星河。”
‘聪辩先生苏星河？原来他还留下了传承。’姚黄非常开心，这样黄药师接受逍遥派的传承就更理所当然了，‘珍珑棋局高明无比，当年可是难倒了无数江湖中的豪杰俊才，前辈能够破解，才智见识非普通人能及。’
姚黄的马P让黄药师非常受用，破解珍珑棋局乃他平生最得意的一件事情。珍珑棋局玄奥无比，局中“金鸡独立”、“老鼠偷油”以及“倒脱靴”（以上全部为围棋术语）等妙招环环相扣，自己研究了半年，差点走火入魔，最后壮士断腕、置之死地而后生才破解了这一棋局。黄药师纵然骄傲，对于创立了珍珑棋局的人佩服不已，不过，他把苏星河当成了创立棋局的人。
“又是你师傅告诉你的吗？那苏星河是怎样的人，你来讲讲。”黄药师问道。
‘聪辩先生苏星河，是聋哑门的掌门人，聪辩即是聋哑，因为耳虽聋而心聪，口虽哑而理辩。但其实所谓聋哑门，不过是掩人耳目。苏星河是逍遥派祖师逍遥子的徒孙，逍遥子收了三个徒弟无崖子、李秋水和天山童姥……为了收到一个天资聪颖、英俊潇洒的弟子，以便将毕生功力传给他，让他为师报仇，清除丁春秋这个叛徒，无崖子创立了珍珑棋局，结果太高深了，几十年来无人能破，而最后一次却被一个相貌丑陋不懂下棋的小和尚误打误撞所破……’
姚黄由苏星河说到了逍遥派，由逍遥派说到珍珑棋局和虚竹，然后说到萧峰与段誉，一口气将整个《天龙八部》的故事讲了出来。黄药师三人听得如痴如醉，百多年前的江湖风云让他们向往不已。