原来郭靖黄蓉在襄阳得到郭芙传书，知晓黄药师失智，心知危急，兼程赶往桃花岛，那时郭襄刚返回襄阳，襄虏二人便随后快马出发。靖蓉快马加鞭，三日便抵达桃花岛家中，但依然是错过了黄药师出海之期，只在岛上见到郭芙，耶律齐。两人将外公之事详细说与父母，皆是嗟叹不已。郭靖深责郭芙未能留阻住黄药师，郭芙自小与外祖父感情甚好，知道外祖父这一番远洋，必是凶多吉少，心中本就难过，被父亲责骂虽十分委屈，却也只是垂泪不语。黄蓉反倒从中开解，深知己父要行之事，天下间根本无人能阻。待说起九阴真经之事，靖蓉二人不禁心下骇然，对以一敌三，且重伤王重阳的吴狄甚感惊异，暗忖郭靖修为当世登峰造极，若说胜过五十年前论剑五绝任何一人，均非难事，但若说以一对三人联手，只怕是绝难取胜，更遑论重伤王重阳，思之心下骇然。
待郭襄，郭破虏抵达，一家团聚，筹划桃花岛善后事宜，极是棘手。按说黄药师出海，一来神志不清，二来坐了那艘令靖蓉终生难忘的画舫，想必是再也不会回岛，但若说就此给黄药师办了后事，又委实好生难办。且不说生不见人死未见尸，黄老邪一生神龙见首不见尾，料不一定哪一天真回了岛上，一看生祠都给建好，不免要大为光火，况且出海不久，那画舫也未必立时化了去，大有可能尚在人间，又岂能给做了法事？最后黄蓉做主，将黄药师卧室布置一新，门窗上锁封好，倘若真有一天药师回岛，立时便能住回旧室。又于母亲坟冢一侧，另立一块新碑，碑上不刻生辰题跋，却只刻两行字：
桃花影落飞神剑
碧海潮生暗玉霄
又将碑上缮了黑纱，嘱咐三子，待自己与郭靖故去，方可来此去了这黑纱。安排妥当，郭靖不免又担心起大师父柯镇恶，却遍寻不到踪迹，只得作罢。令郭芙，耶律齐先行返回襄阳，靖蓉二人再盘桓数日，做完头七方毕，实则又不能大摆灵堂，只能心中念过七天佛，方才启程，郭襄，郭破虏姐弟俩自小与黄药师少聚，被命留在岛上，做完七七方可返回。但既无灵堂法事，这两人在岛上也是百无聊赖，郭破虏喜静，尚能坐住，郭襄好动，哪里能呆得下？况且从姐姐口中得知，杨过已早数日去临安取药，此时想必已回到襄阳，自然是归心似箭，归师勿掩。几番要拖着郭破虏偷跑出岛，破虏都是不肯，直至撒泼耍横以死相逼，又捏造谎说母亲有飞鸽传书，要他们速返，待破虏要看书信，她又顾左右而言他，总之终于押着破虏上路。
乍返陆地，郭襄心情大好，虽说是兼程倍道，也是东张西望，活蹦乱跳，难掩内心喜悦。一日里到了湖州，在客栈打尖之时，却闻得邻屋里有女子啜泣不断，郭襄好事，便拉着破虏去叫了门看，原来是一个快五十岁的干瘦老头，带着一个十五六岁，与郭襄相仿的少女。少女两眼哭肿，啜泣不止，样子倒有几分动人颜色。郭襄便问起缘由，到底有何难解之事。
那少女便道：“两位不知，奴家是江北南阳人士，姓许，去岁鞑子兵杀来，因同父母逃难，扑奔临安而来。哪知到了这里，母亲在客店染病身故，女父二人就此流落生受。此间有个大员外，姓沈，经营镖局赌场勾栏，做着好大生意，因见奴家中意，便使强媒硬保，要奴做妾。谁想写了两千贯文书的典身钱，虚钱实契，要了奴家身体。哪知他家大夫人好生利害，日日里欺侮奴家，前日终被赶打出来不算，又逼勒着我父亲归还那两千贯钱，却又哪里有钱还他？父亲懦弱，争执不得，那沈员外有钱有势，原本也算和善，只是那夫人太过强梁霸道，闹将起来，员外也只诈作不知。这日来逼债甚紧，女父两个想起这苦楚来，无处告诉，因此啼哭，触犯了客人，望乞赎罪，高抬贵手。”
郭襄听得她是南阳人士，正在襄阳城北，已经有些亲近之感，待说到被沈员外强娶，又被夫人欺侮，又虚钱实契云云，心下不禁大怒，将这女子好生抚慰，又给了十两银子周济，便与郭破虏退了去。回返房间，郭襄怒不可抑，大骂这沈员外一家丧尽天良，口口声声要去替天行道，为民除害，郭破虏不愿惹事，反复劝解，直到二姐平静，方返回歇息。第二日里两人退房之时，见那隔壁父女两个已先走了，想是既得了盘缠，又恐对方再来索债，故而走了。郭襄心中高兴，如此一来，纵然生了事，也没了后患。
向客栈掌柜打听得清楚，郭襄便带着郭破虏去到那沈员外府左近，果然好大一片屋宇，气派非凡，郭襄便口口声声说要去教训这对狗男女。破虏本来高来高去的功夫不行，自然不肯答应，又抓紧二姐不放，说来说去，郭襄自己一人也强要出头，又答应郭破虏不伤人命，方才得去。果然郭襄潜了进去，片刻间府里大乱，鸡飞狗跳。郭破虏很是担心，几次想从包裹中拿出长刀，杀进府中，又恐当者便死，杀伤无辜。正没奈何间，郭襄满脸嘻笑，翻墙而出，两人打马便走，眨眼间后面十几骑家丁追来，便有了后来遇到吴烬之事。
吴烬，郭襄，郭破虏三人就近寻了个茶铺叙话。说到郭襄去那沈府中，抓了个小厮，方知沈员外不在，便径直去寻了夫人，当场一顿胖揍，那小厮却溜去喊了人，郭襄也不恋战，拔腿便跑，讲到酣处，三人不禁哈哈大笑。又聊到武功家数，郭襄自知武艺低微，不敢夸口，但她毕竟郭家长大，身边郭靖，黄蓉，耶律齐，又后来认识杨过，一灯，周伯通，邂逅金轮法王，全是当世绝顶高手，眼界自是极高。上次见吴烬手掰银锭倒算不上什么，这次见他连倒三匹奔马，又把那首领玩弄于股掌之上，虽然对手武艺低微，他手不抬脚不伸，却也显出极高明的功夫。行家看门道，郭襄稍作点评，吴烬也是肃然起敬，没想到这小姑娘竟有如此眼力。
说起武功，郭襄对吴烬道：“吴大哥年纪轻轻，武功就已经达到这等境界，只怕我姐夫尚且不能及，天下间只我外祖父，父亲和大哥哥或许能高过你。”说到外祖父，心中不禁略略难过，续道：“但若说手脚不动而败敌，应该只有我大哥哥才能做到。”说话间眼中流露无限憧憬。