开发者社区 问答 正文

MaxCompute中如何周期性调度?

MaxCompute中如何周期性调度?

展开
收起
芯在这 2021-12-12 21:40:07 548 分享 版权
1 条回答
写回答
取消 提交回答
  • DataWorks 上的任务与ECS 上的任务,如何形成依赖 关系? 对于拉取,我们通过循环实现了python 与MaxCompute 表的依赖关系,那么 算法训练完成了,DataWorks 的下游怎么知道呢?幸好,DataWorks 提供了dowhile 控制流组件,我们可以在while 条件中检测模型表相应分区的数据是否存在了, 在 do 组件中,则采用shell 执行sleep。跳出while 后,则下游也开始正常执行了。 之后便可以将模型和映射文件同步写入到oss,以供后端使用了。

    2021-12-12 21:40:29
    赞同 展开评论