题目 ID: q-6328

4. 你用的什么RL的算法？GRPO的原理？你如何修改reward模型？adv是怎么计算的，手撕一下公式？组采样是如何做的？手撕一下temperature