玄宗宴于勤政楼下，巷无居人。宴罢，帝犹垂帘以观。兵部侍郎卢绚谓帝已归宫掖，垂鞭案辔，横纵楼下。绚负文雅之称，而复风标清粹，帝一见不觉目送之，问左右曰：“谁？”近臣具以绚名氏对之，帝亟称其蕴藉。是时林甫方持权忌能，帝左右宠幸，未尝不厚以金帛为贿，由是帝之动静，林甫无不知之。
　　翌日，林甫召绚之子弟谓曰：“贤尊以素望清崇，今南方藉才，圣上有交广之寄，可乎若惮遐方，即当请老；不然，以宾詹仍分务东洛，亦优贤之命也。子归而具道建议可否。”
　　于是绚以宾詹为请。林甫恐乖众望，出为华州刺史，不旬月，诬其有疾，为郡不理，授太子詹事，员外安置。