第二天，黄药师敏感地察觉到了杨过和颜鸿之间互动的变化，一时间心底多了几分只有他自己知道的寥落，送别了两人，黄药师也没有顾得上自家女儿和女婿的挽留，便又带着程英和陆无双两个徒儿离开了。只是，这一别再见却不知是何日了。
回到了嘉兴自己地盘的颜鸿和杨过，自然地搬到了一个房间住，府中的下人根本就没人敢乱嚼舌根。颜鸿原本还顾忌着自己和杨过的身体年龄还太小，根本就没有什么其他的心思。可不知道杨过这小子最近在外面学了些什么，晚上竟然开始不安分地用手拽着两人的要害，笨拙地寻求刺激。颜鸿动手让杨过因为慌乱结果疼得厉害却怎么都弄不出来的小家伙彻底地高兴了一回后，却是掀开被子，扒了杨过的裤子，直接啪啪啪地揍了这嫩白的小屁股好几下，然后冷着脸说了杨过几句，直到杨过保证再也不敢再随便跟着人去那些烟花之地胡乱学什么东西后，这才消了气，给杨过涂了些伤药后，拉着杨过重新盖好被子睡觉。
两人捅破了暧昧后的日子，过得倒是多了些腻歪，颜鸿有时候看着杨过时不时地讨好举动，看着不知道谁给他出的主意，特意去花园摘来的花朵，或者是自己琢磨着手艺，雕刻了个小小的颜鸿以及一个小小的杨过摆在一起……这样子的小举动带着少年人的傻气和讨好，却让颜鸿的心更加多了几分柔软。
时间一晃而过，如白驹过隙，四年时光便这么从指间漏过，颜鸿已经成了一名金丹期修士，而杨过也处在筑基期大圆满境界，两人的修炼速度，绝对是让旁人艳羡的。事实上，若不是颜鸿还花了心思在杨过的修行上多做了指点，速度肯定更快。不过对于颜鸿而言，他通过这样快速度的修炼已经揣测出了系统的几分意思，他有八成的把握会带着此间的身体离开进入到下个世界，既然如此，没有了系统和世界法则的特意限制，对于修炼过无数遍的颜鸿而言，重新铸成真身，不过是快慢的问题罢了。他一点儿也不着急。
这几年，郭芙曾经和武家兄弟偷偷地来过嘉兴，只可惜，那个时候杨过正在闭关，颜鸿没有心思招待这位娇小姐，直接派人将这三人给送回了桃花岛。郭靖后来又曾邀请两人去桃花岛，却都被拒绝了。
虽说如此，彼此之间逢年过节，还是会有些礼尚往来，也许就是因为如此，郭靖和黄蓉夫妇在陆家庄举办英雄大会，也给两人送来了请帖。
无论是颜鸿还是杨过，都是刚刚稳定了现在的境界，短期内也不会有大的突破，颜鸿的阅历摆在那里，随着进阶自然也不会有什么心境问题。可杨过不同，他还是需要多见识见识的，因此，随后的回信中，颜鸿和杨过表示了会去出席英雄大会之意。