机器学习PAI现在带有all reduce 的算子是trace不出来的？结果会错？有办法绕过去吗？
机器学习PAI现在带有all reduce 的算子是trace不出来的，结果会错，有办法绕过去吗？ 如果只想融合下算子 ，除了aot autograd，还有其他方式吗？
展开
收起
1
条回答
写回答
写回答
-
如果是只是想测下 fusion，直接用就可以了，dynamo 在 trace 的时候会 break 掉 collective ops。 但社区已经在解决这个问题了，比如这个 RFC：https://github.com/pytorch/pytorch/issues/93173 ，以及这个 unit test：https://github.com/pytorch/pytorch/blob/main/test/distributed/test_inductor_collectives.py 。 ，此回答整理自钉群“BladeDISC用户支持群”
2023-12-25 08:05:24赞同 展开评论 打赏
问答分类：
相关产品：
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
人工智能平台 PAI（Platform for AI，原机器学习平台PAI）是面向开发者和企业的机器学习/深度学习工程平台，提供包含数据标注、模型构建、模型训练、模型部署、推理优化在内的AI开发全链路服务，内置140+种优化算法，具备丰富的行业场景插件，为用户提供低门槛、高性能的云原生AI工程化能力。
热门讨论
热门文章
P人出游，你是否需要一个懂你更懂规划的AI导游呢？来搭建专属文旅问答机器人吧
1457
在api调用夸克搜索时，遇到权限不足问题
259
机器学习PAI英伟达这个v100和4090哪个强？做comfyui生视频用
144
如何高效的往交互建模（dsw）上传较大的文件，有从阿里云盘中直接下载或类似的方法吗？
3861
Rider中的AI代码预测，与Rider自带的代码补全功能不兼容
215
为什么我的天池notebook中，无法创建notebook文件，也无法显示我的天池文档等内容。
877
机器学习PAI有没有类似colab这种免费的在线Notebook代码编辑运行环境啊？
395
PAI做了线性回归的模型，预测结果后，回归模型评估的节点，结果R2的值是负的，我理解R2的取值范围?
324
我昨天申请阿里云机器学习PAI-DSW免费试用三个月，创建实例后今天被删除了
247
自定义机器人消息，curl: (35) TCP connection reset by peer
415
展开全部
【玩转数据系列十】利用阿里云机器学习在深度学习框架下实现智能图片分类
49572
【玩转数据系列十五】机器学习PAI为你自动写歌词，妈妈再也不用担心我的freestyle了（提供数据、代码）
20729
【玩转数据系列六】文本分析算法实现新闻自动分类
19412
【玩转数据系列一】人口普查统计案例
16307
阿里巴巴机器学习系列课程
15800
【玩转数据系列十三】机器学习算法基于信用卡消费记录做信用评分
14956
【玩转数据系列三】利用图算法实现金融行业风控
13376
【玩转数据系列四】听说啤酒和尿布很配？本期教你用协同过滤做推荐
14721
基于协同过滤算法的推荐
10093
FM算法介绍
11741
展开全部
