DataWorks创建FTP Check节点创建FTP Check节点是什么?
进入数据开发页面。登录DataWorks控制台。在左侧导航栏,单击工作空间列表。选择工作空间所在地域后,单击相应工作空间后的进入数据开发。在数据开发页面,鼠标悬停至 图标,单击通用 > FTP Check。您也可以打开相应的业务流程,右键单击通用,选择新建 > FTP Check。 在新建节点对话框中,输入节点名称,并选择目标文件夹。说明 节点名称必须是大小写字母、中文、数字、下划线(_)和小数点(.),且不能超过128个字符。单击提交。单击节点编辑区域右侧的调度配置,配置节点的调度属性。调度属性包括基础属性、时间属性、资源属性和调度依赖,详情请参见配置基础属性、配置时间属性、配置资源属性及配置调度依赖。配置检测对象及检测策略。 在选择FTP数据源下拉列表,选择需要检测的目标FTP数据源。您可以选择FTP或SFTP数据源,如果下拉列表没有可用的数据源,则您需要新建数据源,详情请参见配置FTP数据源。在指定Check的文件配置需要检测的文件路径。如果您的文件路径是动态变化的,则您可以在文件路径中使用调度参数来配置变量路径,详情请参见基础属性:调度参数。在Check间隔(秒)中配置定时检测的时间间隔。在Check停止策略中配置停止检测的策略。Check停止时间:检测任务的到时时间点,格式为hh24:mi:ss,即24小时制时间。每次执行检测任务时,如果没有检测到对应的标记文件,则该检测任务失败,不会触发启动调度下游任务,只有检测成功时,才会启动调度下游任务。检测失败后,该任务会按配置的间隔时间继续检测,直到到达配置的停止检测时间,才不再继续检测。如果检测失败,您可以在任务日志中查看具体的失败原因。常见报错详情请参见常见问题。说明FTP Check节点的调度周期配置结果会影响FTP Check的停止策略:当调度周期配置为分钟或小时时,停止策略不支持配置为Check停止时间,只能配置为Check停止次数。详情请参见配置FTP Check的检测策略。当调度周 https://help.aliyun.com/document_detail/215542.html,此回答整理自钉群“DataWorks交流群(答疑@机器人)”
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。