"问题一:想问下,可以在dataworks上起调度,运行阿里云上租的服务器上一个容器里的程序吗?我需要做的事情是,数据处理在dataworks,然后down数据到一台阿里云租的服务器上,然后再跑一个容器里面的程序在那台机器上训练模型。这个流程,您有没有什么建议的做法啊? 问题二:如果想 起调度,数据处理完后,执行下载,这个具体怎么做呢?数据存储和处理都是在ds上,mc处理,数据处理的任务跑完,就下载数据"
"回答一:这属于sdk的范畴了。单独在DataWorks上面应该做不到,可以跟DataWorks的openapi结合试试,down数据用MaxCompute的Tunnel sdk。https://help.aliyun.com/document_detail/27840.html?spm=a2c4g.276121.0.0.d57b346bvQDKr7
自动跑容器的程序,只能自己写定时调度了 回答二:可能需要自己写api了,连DataWorks的openapi,查询计算节点返回的值,如果成功,就执行下载任务。此回答整理自钉群“MaxCompute开发者社区2群(答疑@机器人)”"
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。