开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks如何创建FTP Check节点背景信息?

DataWorks如何创建FTP Check节点背景信息?

展开
收起
cuicuicuic 2023-11-13 12:02:49 43 0
3 条回答
写回答
取消 提交回答
  • 在DataWorks中创建FTP Check节点的步骤如下:

    1. 登录到DataWorks控制台,并转到对应的工作空间。

    2. 在左侧导航栏中,点击“数据开发”。

    3. 点击“新建”按钮。

    4. 在新建节点对话框中,选择“FTP Check”节点。

    2023-11-30 16:22:48
    赞同 展开评论 打赏
  • 当DataWorks调度系统中的任务需要访问一个外部数据库时,但由于该数据库的相关数据写入任务不在DataWorks中,DataWorks无法知道该数据库何时完成写入任务并可以被访问。在这种情况下,可以使用FTP Check节点来检查FTP服务器上的数据文件是否已经准备好供DataWorks的任务进行读取。
    以下是创建FTP Check节点的步骤:

    1. 登录DataWorks控制台,进入工作空间。
    2. 在左侧导航栏中选择“数据开发”,然后单击“新建”按钮。
    3. 在弹出的新建节点对话框中,从节点类型列表中选择“FTP Check”节点。
    4. 填写FTP Check节点的基本信息,包括名称和描述。
    5. 配置FTP服务器连接信息,包括主机地址、端口、用户名和密码等。
    6. 配置要检查的数据文件路径和文件名模式。
    7. 保存并提交新建的FTP Check节点。
    2023-11-13 22:02:11
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    DataWorks中的FTP Check节点是一种特殊的节点类型,它可以帮助你在DataWorks调度系统中检查FTP服务器上的数据文件。以下是创建FTP Check节点的步骤:

    1. 登录DataWorks控制台,进入工作空间。
    2. 在左侧导航栏中选择“数据开发”,然后单击“新建”按钮。
    3. 在弹出的新建节点对话框中,选择“自定义脚本”作为节点类型,然后输入节点名称和描述。
    4. 单击“确定”按钮后,你会进入到自定义脚本编辑页面,在这里你可以编写自己的脚本来实现FTP Check功能。
    5. 编写完成后,单击右上角的保存按钮,然后就可以将这个节点添加到你的任务流中了。
    2023-11-13 13:30:45
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 相关电子书

    更多
    DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载