题目 ID: q-4429 DPO数据如何构建 频次 4 NLP与大模型 收藏 标记完成 当前状态：未收藏、未完成 常见追问 3.项目深挖：DPO数据如何构建dpo 数据怎么建的，数据的格式dpo数据怎么构建 常见公司 百度滴滴字节跳动