一连在灵鹫宫停留了三日，虚竹虽还未完全掌握石壁上的《逍遥游》轻功，但已经记全了口诀，日后再勤加练习即可。
这一日，虚竹便打算回少林了。
灵鹫宫众人将他送下山，杨过看了眼梅兰竹菊四姐妹，嘱咐道：“暗中跟着他，不要让他受人欺负！”
梅兰竹菊四姐妹当即应是，接着就紧随其后离开了。
余下的九天九部诸婢见状，心里对杨过也认同了几分。
“既然虚竹要回少林，我也该离开了！”
看了眼九天九部的首领，杨过缓缓说道。
余婆婆等人顿感意外道：“尊主，您也要离开？”
杨过笑道：“我有说过要坐镇灵鹫宫吗？”
“这……”
九位首领纷纷面露为难之色。
杨过看出了她们的心思，当即说道：“等副尊主处理好少林的事后，自会回到这灵鹫宫中坐镇，至于灵鹫宫中的大小事宜，就由你们九人代为处理，若遇事不决，再通知我，或是副尊主决断，都可以。”
“属下遵命！”
余婆婆等人对视一眼，无奈应道。
她们本以为杨过会贪恋灵鹫宫尊主之位带来的权利威望，谁料对方竟然半点不在乎，虚竹前脚刚走，就连他也要离开，这不禁让余婆婆等人有些哭笑不得。
灵鹫宫中的九天九部倒是较为和谐，基本不会出现内讧的情况，但三十六洞和七十二岛的势力便较为庞大，杨过也是用了一天的时间将他们的势力范围划分清楚，分别交给九天九部负责统率管理，若哪一方势力除了问题，他便专找这一部众的首领即可。
因为在当日乌老大等人攻入灵鹫宫时，杨过杀了不少人，因此有许多势力的洞主、岛主都处于空缺的状态，关于这些事，他也委派了除余婆婆、石嫂和符敏仪以外的六部首领前去扶持一位新的主事人出来，并迫其服下断筋附骨丸。
断筋附骨丸相当于丸状的生死符，服下后，体内便会直接种下生死符，无需人为打入。
至于余婆婆等三人，则留下来坐镇灵鹫宫。
将一切事宜都安排妥当后，杨过不禁感到一阵身心疲惫，在见过王语嫣，陪了她一阵，就回房倒头睡下，一直到了第二天日上竿头才起来。
一番梳洗，唤来在缥缈峰野了好几天的白龙，就准备下山离去。
告别灵鹫宫诸婢，杨过与王语嫣携手下山，在山间处，白龙听到杨过的声音，便立马奔
…。。