开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

调用外部api用shell脚本还是用python好呢

odps中有几百亿条数据, 需要遍历该表, 调用外部api接口, 把接口返回的数据保存到odps中 有什么解决方案嘛, 能够快速的跑完. 调用外部api用shell脚本还是用python好呢

展开
收起
游客6vdkhpqtie2h2 2022-09-06 23:21:18 968 0
1 条回答
写回答
取消 提交回答
  • 您好 计算的费用都是由引擎收取的,跑同一段代码 仅运行环境不同 不会增加计算复杂度;调度的费用可以参考一下https://help.aliyun.com/document_detail/424105.html maxcompute的api可以参考一下 https://help.aliyun.com/document_detail/90638.html 具体关于引擎的部分可以咨询一下mc的同学看看(此答案整理自DataWorks交流群(答疑@机器人))

    2022-09-07 00:00:36
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关电子书

更多
From Python Scikit-Learn to Sc 立即下载
Data Pre-Processing in Python: 立即下载
双剑合璧-Python和大数据计算平台的结合 立即下载