开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文
4
0
分享

DataWorks配置mc数据同步至ftp数据源时 文件的名字可以动态加上执行日期么?

DataWorks配置mc数据同步至ftp数据源时 文件的名字可以动态加上执行日期么?

展开
收起
真的很搞笑 2023-10-01 08:59:01 153 0 发布于黑龙江
举报
飞天免费试用计划
领取免费云资源,开启云上实践第一步
大数据开发治理平台DataWorks
Serverless资源组抵扣包300CU*H
额度3个月内有效
4 条回答
写回答
取消 提交回答
  • 北京阿里云ACE会长

    是的,DataWorks 配置 MC 数据同步至 FTP 数据源时,文件的名字可以动态加上执行日期。
    要在同步过程中动态添加执行日期,您可以在 DataWorks 中设置文件名模板。具体操作步骤如下:

    1. 登录 DataWorks,进入工作空间。
    2. 点击左侧菜单栏的“数据集成”选项,进入数据集成页面。
    3. 在数据集成页面中,找到您的 MC 数据同步任务,点击任务名称,进入任务详情页面。
    4. 在任务详情页面中,点击“编辑”按钮,进入编辑页面。
    5. 在编辑页面中,找到“文件名模板”选项,点击“编辑”按钮。
    6. 在文件名模板页面中,您可以通过添加占位符的方式动态添加执行日期。例如,您可以使用以下占位符:

    ${yyyyMMdd}
    CopyCopy

    其中,yyyyMMdd 表示年月日格式。

    1. 设置好文件名模板后,点击“保存”按钮,返回任务详情页面。
    2. 点击“开始”按钮,启动任务。
      这样,在同步过程中,文件名就会自动添加执行日期。
    2023-10-02 08:40:43 发布于内蒙古 举报
    赞同 评论 打赏

    评论

    全部评论 (0)

    登录后可评论
  • 是的,您可以使用DataWorks中的内置变量和函数来实现将执行日期动态添加到文件名中。

    以下是一种方法,通过DataWorks的数据同步任务配置将执行日期动态添加到文件名:

    1. 打开DataWorks控制台,并进入相应的数据同步任务。
    2. 在数据同步任务的"同步节点"中,选择要导出的表和目标数据源(FTP数据源)。
    3. 在"同步节点"的右侧,找到"参数设置"选项,点击进入。
    4. 在"参数设置"页面中,找到"文件名称"或"文件路径"相关的参数设置项。
    5. 在需要添加执行日期的位置,使用${bizdate}代表执行日期。例如,如果您希望文件名为"file20220101.txt",则可以将文件名设置为`file${bizdate}.txt`。
    6. 保存并提交任务。

    ${bizdate}是DataWorks内置的系统变量,表示任务执行日期。您可以在参数设置中使用该变量来实现动态文件名的生成

    2023-10-02 08:45:05 发布于河南 举报
    赞同 评论 打赏

    评论

    全部评论 (0)

    登录后可评论
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    是的,您可以在DataWorks配置中将导出的文件名动态地包含执行日期。以下是一种实现方式:

    1. 在DataWorks控制台的数据同步任务中,选择要导出到FTP数据源的作业。

    2. 进入作业详情页后,在左侧的"数据同步节点"中找到需要导出的节点。

    3. 单击该节点,在右侧的属性设置中找到"输出路径"或类似的选项。

    4. 在输出路径中,使用${bizdate}变量来表示执行日期。例如,如果要将日期添加到文件名之前,则可以设置输出路径为${bizdate}/your_filename.csv

    5. 保存设置并提交作业。

    使用${bizdate}变量时,它会根据任务的调度日期自动被替换为实际的执行日期。这样,每次执行任务时,导出的文件名都会动态地包含执行日期。

    请注意,${bizdate}变量采用的日期格式为yyyyMMdd,您可以根据需要进行进一步格式化。

    2023-10-02 08:49:20 发布于河南 举报
    赞同 评论 打赏

    评论

    全部评论 (0)

    登录后可评论
  • 可以结合调度参数使用,用脚本模式配置,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-10-01 09:56:20 发布于黑龙江 举报
    赞同 评论 打赏

    评论

    全部评论 (0)

    登录后可评论

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 热门讨论

    热门文章

    相关电子书

    更多
    DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载
    AI助理

    你好,我是AI助理

    可以解答问题、推荐解决方案等