不等翌日上朝，两人当日就奉诏入宫，在御花园叩见玄宗。
玄宗此前已收到青城的奏报，得知鬼界碑被毁乃是永王李璘所为。玄宗勃然大怒，就等着永王回京，重重责罚。
见到永王李璘哆哆嗦嗦跪在面前，玄宗怒不可遏，抄起手中鱼竿，劈头盖脸一顿抽打。永王知道犯下滔天大错，不敢躲闪。
玄宗怒道：“你娘怎么生下你这么个忤逆玩意儿，让列祖列宗蒙羞。力士，给我拟旨，革去永王爵位，贬为庶民，流放夜郎！”
永王一听，如晴天霹雳。他面无人色，嚎啕大哭，以头戗地，血披满面。
虢国夫人此刻正陪在玄宗身旁，赶忙抚慰。虢国夫人道：“永王虽然年轻，但一向行事稳重，此举必有隐情。陛下岂能单听青城一面之词，何不让永王和杨大人解释两句。
若真是永王惹下的祸事，再重重责罚也不迟。”
玄宗这才扔掉鱼竿，面色一沉，道：“事到如今，我就看你怎么狡辩！”