题目 ID: q-5147

想象一下，你训练完成的RLHF模型在离线评估中表现优异，奖励模型分数很高，但上线后用户反馈其回答变得越来越'模式化'、奉承、且缺乏信息量。你认为可能的原因是什么？