楊過心裡焦急，那怪人卻不在乎地說道：「哪個惡女人？怕她作甚？」楊過焦急地說：「可別問了，趕緊走吧。」然而，郭芙已經翻過了一個大石塊，看到了楊過。見楊過居然划船要走，氣憤地跑過來，吼道：「楊過，你這是要做什麼？還有你……」郭芙雙手叉腰，指著那怪人罵道，「你是什麼人，居然趕來我桃花島？桃花島是隨隨便便可以來的嗎？」見郭芙那般盛氣凌人，楊過不由得暗罵草包。桃花島不是隨隨便便可以來的，那來了的人自然不會是隨隨便便一個人了。只是，他心裡焦急要離開，便不住地催促那怪人。不想，怪人竟怔怔然的，似乎在思索什麼，如何催促，也不見撐船。郭芙見到，還以為那怪人怕了自己，揚著下巴說道：「我說，你快點下船來，跟我爹娘請罪，我爹娘或許還會放你一馬。我告訴你，我爹是……」郭芙正要說出父母的名號，不想那怪人再也聽不下去，一掌便拍了下來。怪人的武功甚高，巨掌尚未印到身上，郭芙已經覺得胸悶氣短，「哇」一聲吐出一口鮮血。眼看著，巨掌越開越近，郭芙只當自己就要死了，一張臉嚇得煞白。楊過雖然厭惡郭芙，卻沒到希望她死的地步，不由得喊道：「爹，你饒了她罷。」
怪人聽到楊過的呼喚，又是一愣。然而，那電光火石之間，另一隻大掌卻對上了他，怪人不由得後退幾步。楊過一看，暗暗叫苦。原來，竟然是郭靖到了。後頭，黃蓉扶著柯鎮惡，亦是滿臉焦急。
郭靖扶過郭芙，說：「歐陽鋒，你怎麼跑到這裡來了？過兒，你快到我身後去，別被這惡人害了。」楊過瞥了瞥郭靖，不出聲。歐陽鋒卻喊道：「歐陽鋒是誰？我跑這裡來做什麼了？你認識我，你說我是誰？」郭靖正要答話，柯鎮惡卻甩開黃蓉，說道：「老毒物，你竟然還敢來桃花島。我老瞎子不殺了你，怎麼對得起死去的弟妹們？」說完，舉著鐵杖便砸向歐陽鋒。不想，鐵杖反彈過來，使得柯鎮惡摔了一跤。郭靖生怕歐陽鋒傷了師傅，便接過歐陽鋒的掌風，以降龍十八掌對起歐陽鋒的蛤蟆功來。楊過見兩人打得熱烈，眾人都在關注打鬥，便縮著身子，想要撐船離開。不想，郭芙雖是重傷，卻時時刻刻注意著他，喊道：「楊過，你想逃嗎？」聽到郭芙這麼說，楊過心裡的傲氣又被激起，乾脆走下小舟，不逃了。這邊，郭靖痛歐陽鋒打得熱烈。兩人一個年輕力盛，一個武功逆行，打了個平手。然而，郭靖年輕，耐力持久，更兼黃蓉在一旁掠陣，歐陽鋒竟然被郭靖一招亢龍有悔印在心口。
「哈哈，降龍十八掌！」歐陽鋒怪叫一聲，笑著掠向小船。速度極快，內力催著小船很快便不見身影了。楊過焦急不已，哪裡還能趕上去？郭靖性子敦厚，見追不上歐陽鋒，也就罷了。他關切地問道：「過兒，你可有受傷？」
楊過搖了搖頭，悶聲跟在他身後。黃蓉心裡雖有疑惑，只是郭芙疼得已經混到過去，便暫且不提了。回去之後，楊過隨意用了些飯菜，心裡無比懊悔。若是不下扁舟……唉，不下又如何，兩個人那麼重，那個瘋子恐怕就逃不掉了。至於郭芙，早被他仍在了腦後。郭芙雖然受傷，只是有桃花島靈藥九花玉露丸，很快就甦醒了。
下午，見楊過一個人蹲在窗台上望天，郭芙拍了拍他的肩，說：「楊過，你想什麼呢？」
楊過不喜歡她，依舊不理。郭芙心裡便有了氣。這桃花島上，誰不把她當做寶貝？先前，覺得和柯公公呆在一起也不煩悶。但自從見了楊過之後，便想著和他一起玩鬧，偏偏楊過不識好歹，總是愛理不理。郭芙心裡委屈，便喊道：「楊過，你神奇什麼？你別以為我不知道你是什麼人！小心我把你的事情全部告訴娘親，將你趕了出去。」楊過卻想著，趕出去更好，誰稀罕這裡啊。是而，依舊不理郭芙。郭芙難受地跺了跺腳，見母親扶了柯公公過來，便喊道：「楊過，你不要以為我不知道你和歐陽鋒的關係。我聽到你叫他爹，你說是不是？」楊過冷笑一聲，說：「是又如何？」郭芙說：「那種壞人，人人見殺，你居然叫他爹。你還……害我差點被他打死！」
郭芙明知當時楊過求情，她才能逃過一死。這會兒心裡有氣，便顧不得那麼多了。只希望母親可以重重懲罰楊過，好出口氣。她卻沒想到，這口氣出得太大了。柯鎮惡當時便揚了鐵拐，要打死楊過。好在黃蓉在一旁，阻止了他。但是，柯鎮惡依舊餘怒難消，忿忿不平地嚷著要離開桃花島，不想見到楊過。柯鎮惡大嚷不已，郭靖聽到，忙趕了過來。黃蓉聽信了郭芙的話，心裡恨楊過害了自己的女兒，雖然看在郭靖的面子上沒由著柯鎮惡打死楊過，卻也不希望楊過留在這裡。她大致將事情說了一番，又說：「桃花島是大師傅的家，怎麼能讓大師傅走呢？」郭靖又是氣又是擔心，一巴掌就要扇到楊過臉上。楊過倔強地偏著頭，郭靖心裡一軟，又扇不下去了。他求救地望著黃蓉，問道：「蓉兒，你再勸勸大師傅吧。」柯鎮惡冷哼幾聲，說：「無論如何，我是不要看到這個人了！」黃蓉想了想，說：「靖哥哥，我倒有一個好法子。全真教是天下武學正宗，你也曾拜師全真教。要麼，你將過兒送去全真教學武，也是好事一樁。」郭靖一向尊敬柯鎮惡，又及聽黃蓉的話，稍稍想了想，便答應了。郭芙沒想到事情居然會這麼嚴重。她只想稍稍懲罰楊過，好叫楊過順著她。這會見楊過要走，也不知道什麼時候才能相見，眼淚便落了下來。楊過雖是天天想著離開，這會兒真要離開桃花島，心裡卻有些黯然。只是，桃花島依舊是呆不下去了，倒不如走了的好。便，重重地應了下來。楊過，終究還是被送往了全真教。