开发者社区 > 大数据与机器学习 > 正文

dataworks中实现ftp指定目录下每天新增的csv文件数据自动同步到maxcompute中,针

dataworks中实现ftp指定目录下每天新增的csv文件数据自动同步到maxcompute中,针对部分日期目录中没有csv文件就会报错,请问这种报错会影响后续增量csv文件的处理吗?image.png image.png

展开
收起
真的很搞笑 2023-04-25 16:57:17 88 0
1 条回答
写回答
取消 提交回答
  • 任务失败会阻塞下游,可以考虑试一下分支 归并节点 ,归并节点支持上游失败 依旧执行下游,sql查询指定项目名前缀可以查生产(需先申请权限),不过建议是在运维中心查看生产任务 image.png ,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-04-27 13:44:23
    赞同 展开评论 打赏

大数据领域前沿技术分享与交流,这里不止有技术干货、学习心得、企业实践、社区活动,还有未来。

相关产品

  • 大数据开发治理平台 DataWorks
  • 云原生大数据计算服务 MaxCompute
  • 相关电子书

    更多
    DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载