开发者社区 > 大数据与机器学习 > 人工智能平台PAI > 正文

请教一下机器学习PAI的问题,如何在baldeDISC设置某些算子不被替换

请教一下,如何在baldeDISC设置某些算子不被替换

展开
收起
游客242jp2lsd3dac 2023-04-15 23:29:36 622 0
3 条回答
写回答
取消 提交回答
  • 公众号:网络技术联盟站,InfoQ签约作者,阿里云社区签约作者,华为云 云享专家,BOSS直聘 创作王者,腾讯课堂创作领航员,博客+论坛:https://www.wljslmz.cn,工程师导航:https://www.wljslmz.com

    在阿里云机器学习PAI上使用BladeDISC时,您可以通过添加“黑名单”来设置某些算子不被替换。黑名单是一个包含不希望替换的算子名称列表的文本文件。以下是在PAI上使用BladeDISC时设置黑名单的步骤:

    1. 创建黑名单文件

      在任何文本编辑器中创建一个名为“blacklist.txt”的文件,并将不希望替换的算子名称按行添加到其中。例如:

      BatchMatMulV2
      Conv2D
      MaxPool
      
    2. 上传黑名单文件

      将“blacklist.txt”文件上传到您的PAI工作空间。您可以在PAI控制台的“文件管理器”中上传此文件。

    3. 添加黑名单参数

      在调用BladeDISC的过程中,将“blacklist.txt”文件的路径添加到命令行参数中。例如:

      bladedisc_convert --input-file=model.pb --output-file=model.blade --black-list=/path/to/blacklist.txt
      

      注意,/path/to/blacklist.txt应替换为您上传黑名单文件的实际路径。

      也可以在PAI控制台的“创建提交”页面中为BladeDISC作业添加参数,在“参数”字段中添加--black-list=/path/to/blacklist.txt参数。

    通过以上步骤,您可以在使用BladeDISC时设置某些算子不被替换,从而实现更精细化的控制和优化。

    2023-04-30 08:10:06
    赞同 展开评论 打赏
  • 值得去的地方都没有捷径

    在BladeDISC中,可以通过修改算子的属性来控制是否对该算子进行替换。具体的做法如下:

    打开BladeDISC的控制台,在左侧的“算子库”中选择需要修改的算子。

    在右侧的“算子属性”中,找到“替换”属性,并将其设置为“否”。

    保存修改后的算子属性,退出控制台。

    这样设置之后,BladeDISC在进行图优化和代码生成时,就不会对该算子进行替换了。需要注意的是,如果一个算子被设置为不可替换,可能会影响整个计算图的优化效果,因此需要根据具体的情况进行权衡和调整。

    2023-04-16 18:01:52
    赞同 展开评论 打赏
  • 在tf/torch侧都有相应的黑名单配置此回答整理自钉钉群BladeDISC用户支持群

    2023-04-15 23:37:37
    赞同 展开评论 打赏

人工智能平台 PAI(Platform for AI,原机器学习平台PAI)是面向开发者和企业的机器学习/深度学习工程平台,提供包含数据标注、模型构建、模型训练、模型部署、推理优化在内的AI开发全链路服务,内置140+种优化算法,具备丰富的行业场景插件,为用户提供低门槛、高性能的云原生AI工程化能力。

相关产品

  • 人工智能平台 PAI
  • 热门讨论

    热门文章

    相关电子书

    更多
    大规模机器学习在蚂蚁+阿里的应用 立即下载
    阿里巴巴机器学习平台AI 立即下载
    机器学习及人机交互实战 立即下载