AI 助理
备案控制台
开发者社区 问答 正文

预训练和推理在GPT中分别指什么？

预训练和推理在GPT中分别指什么？

展开
收起
夹心789 2024-05-30 13:43:21 103 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 芯在这

    在GPT中，预训练是指先通过一部分数据进行初步训练，再在训练好的基础模型上进行微调；推理是指将预训练学习到的内容作为参考，对新的内容进行生成或判断。

    2024-05-30 14:26:53
    赞同 展开评论
问答标签：
推理GPT 预训练GPT
问答地址：
开发者社区 > 云计算 > 问答
相关问答
在训练输入输出式的gpt3 的时候，推理出现异常
347
1
0
GPT-3诗词生成模型-中文-large推理使用问题
361
2
0
请问ModelScope中damo gpt3加载推理只能在main 里面吗？
147
1
0
GPT-3预训练生成模型-中文-13B 这个模型加载报这个错 怎么解决？大佬们
223
1
0
请问用自己的数据finetune了gpt3后 应该怎么用本地的checkpoint推理呢？
315
1
0
老师，gpt-3（2.7B或者1.3B）在推理的时候，模型拆分后还能自行保存吗？
210
1
0
GPT-3预训练生成模型-中文-2.7B 运行报错
1152
1
0
多卡训练得到的GPT3-2.7B模型，推理pipeline加载模型时报错size mismatch
1215
3
0
GPT-3预训练生成模型-中文-2.7B 加载问题，模型是pt文件不是.bin，直接运行示例程序报错
1895
14
0
老师，GPT3 1.3B模型我们用pipeline推理过程就会自动拆分模型，拆分之后模型能保存吗？
265
1
0