开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks怎么在PyODPS节点中调用第三方包依赖开源的三方包?

DataWorks怎么在PyODPS节点中调用第三方包依赖开源的三方包?

展开
收起
wenti 2023-01-16 13:38:41 190 0
2 条回答
写回答
取消 提交回答
  • 如果您依赖一个开源的三方包,需要使用PIP安装,且需要满足以下条件:必须使用独享调度资源组,详情请参见新增独享调度资源组。在独享调度资源组的运维助手中安装需要的三方包,详情请参见运维助手。PyODPS节点分为PyODPS 2和PyODPS 3:如果依赖PyODPS 2节点,请执行如下命令。 pip install <需要安装的包> -i https://pypi.tuna.tsinghua.edu.cn/simple执行命令后,如果提示需要升级PIP版本,请执行如下命令。pip install --upgrade pip -i https://pypi.tuna.tsinghua.edu.cn/simple 如果依赖PyODPS 3节点,请执行如下命令。 /home/tops/bin/pip3 install <需要安装的包> -i https://pypi.tuna.tsinghua.edu.cn/simple 安装了需要的三方包后,使用import命令导入对应包即可使用。例如,通过运维助手使用pip3 -install oss2语句安装了oss2这个Python依赖包后,您可以在PyODPS 3节点中使用import oss2语句导入oss2依赖包并使用。执行命令后,如果提示需要升级PIP版本,请执行如下命令。/home/tops/bin/pip3 install --upgrade pip -i https://pypi.tuna.tsinghua.edu.cn/simple如果使用PyODPS 3出现如下报错,请提交工单申请开启权限。——该回答整理自钉群“DataWorks交流群(答疑@机器人)“

    2023-01-16 17:16:58
    赞同 展开评论 打赏
  • 在PyODPS节点中调用第三方包请参考官方说明https://help.aliyun.com/document_detail/94159.htm

    2023-01-16 13:47:49
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 热门讨论

    热门文章

    相关电子书

    更多
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载

    相关实验场景

    更多