DPO训练后输出长度会变化吗？如何解决这个问题？

常见追问

• 大模型经过dpo训练输出长度会怎么变化？如何解决这个问题？
• dpo训完了一般输出长度会变化吗？如何解决这个问题？

常见公司