题目 ID: q-5033 PPO中的critic model作用是什么？ 频次 2 NLP与大模型 收藏 标记完成 当前状态：未收藏、未完成 常见追问 PPO的critic model作用PPO 模块介绍一下，公式说一下？critical model 什么作用？ 常见公司 字节跳动携程