DataWorks怎么在PyODPS节点中调用第三方包依赖开源的三方包?
如果您依赖一个开源的三方包,需要使用PIP安装,且需要满足以下条件:必须使用独享调度资源组,详情请参见新增独享调度资源组。在独享调度资源组的运维助手中安装需要的三方包,详情请参见运维助手。PyODPS节点分为PyODPS 2和PyODPS 3:如果依赖PyODPS 2节点,请执行如下命令。 pip install <需要安装的包> -i https://pypi.tuna.tsinghua.edu.cn/simple执行命令后,如果提示需要升级PIP版本,请执行如下命令。pip install --upgrade pip -i https://pypi.tuna.tsinghua.edu.cn/simple 如果依赖PyODPS 3节点,请执行如下命令。 /home/tops/bin/pip3 install <需要安装的包> -i https://pypi.tuna.tsinghua.edu.cn/simple 安装了需要的三方包后,使用import命令导入对应包即可使用。例如,通过运维助手使用pip3 -install oss2语句安装了oss2这个Python依赖包后,您可以在PyODPS 3节点中使用import oss2语句导入oss2依赖包并使用。执行命令后,如果提示需要升级PIP版本,请执行如下命令。/home/tops/bin/pip3 install --upgrade pip -i https://pypi.tuna.tsinghua.edu.cn/simple如果使用PyODPS 3出现如下报错,请提交工单申请开启权限。——该回答整理自钉群“DataWorks交流群(答疑@机器人)“
在PyODPS节点中调用第三方包请参考官方说明https://help.aliyun.com/document_detail/94159.htm
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。