开发者社区> 问答> 正文

ChatGPT 的训练可以分为哪几个步骤?

ChatGPT 的训练可以分为哪几个步骤?

展开
收起
夹心789 2024-06-27 12:04:27 55 0
1 条回答
写回答
取消 提交回答
  • "ChatGPT 的训练可以分为三个步骤:
    首先,根据采集的 SFT 数据集对 GPT-3 进行有监督的微调(Supervised FineTune,SFT);
    其次,收集人工标注的对比数据,训练奖励模型(Reword Model,RM);
    最后,使用 RM 作为强化学习的优化目标,利用 PPO 算法微调 SFT 模型。"

    2024-06-27 13:27:24
    赞同 展开评论 打赏
问答地址:
问答排行榜
最热
最新

相关电子书

更多
低代码开发师(初级)实战教程 立即下载
冬季实战营第三期:MySQL数据库进阶实战 立即下载
阿里巴巴DevOps 最佳实践手册 立即下载