开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks创建FTP Check节点创建FTP Check节点是什么?

DataWorks创建FTP Check节点创建FTP Check节点是什么?

展开
收起
真的很搞笑 2023-06-17 15:32:58 61 0
1 条回答
写回答
取消 提交回答
  • 进入数据开发页面。登录DataWorks控制台。在左侧导航栏,单击工作空间列表。选择工作空间所在地域后,单击相应工作空间后的进入数据开发。在数据开发页面,鼠标悬停至image.png 图标,单击通用 > FTP Check。您也可以打开相应的业务流程,右键单击通用,选择新建 > FTP Check。 在新建节点对话框中,输入节点名称,并选择目标文件夹。说明 节点名称必须是大小写字母、中文、数字、下划线(_)和小数点(.),且不能超过128个字符。单击提交。单击节点编辑区域右侧的调度配置,配置节点的调度属性。调度属性包括基础属性、时间属性、资源属性和调度依赖,详情请参见配置基础属性、配置时间属性、配置资源属性及配置调度依赖。配置检测对象及检测策略。image.png 在选择FTP数据源下拉列表,选择需要检测的目标FTP数据源。您可以选择FTP或SFTP数据源,如果下拉列表没有可用的数据源,则您需要新建数据源,详情请参见配置FTP数据源。在指定Check的文件配置需要检测的文件路径。如果您的文件路径是动态变化的,则您可以在文件路径中使用调度参数来配置变量路径,详情请参见基础属性:调度参数。在Check间隔(秒)中配置定时检测的时间间隔。在Check停止策略中配置停止检测的策略。Check停止时间:检测任务的到时时间点,格式为hh24:mi:ss,即24小时制时间。每次执行检测任务时,如果没有检测到对应的标记文件,则该检测任务失败,不会触发启动调度下游任务,只有检测成功时,才会启动调度下游任务。检测失败后,该任务会按配置的间隔时间继续检测,直到到达配置的停止检测时间,才不再继续检测。如果检测失败,您可以在任务日志中查看具体的失败原因。常见报错详情请参见常见问题。说明FTP Check节点的调度周期配置结果会影响FTP Check的停止策略:当调度周期配置为分钟或小时时,停止策略不支持配置为Check停止时间,只能配置为Check停止次数。详情请参见配置FTP Check的检测策略。当调度周 https://help.aliyun.com/document_detail/215542.html,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-06-17 15:47:01
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 热门讨论

    热门文章

    相关电子书

    更多
    DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载