开发者社区> 问答> 正文

DataWorks同步解决方案mysql一键实时同步Datahub报脏数据

已解决

DataWorks同步解决方案mysql一键实时同步Datahub报脏数据

展开
收起
提个问题! 2024-06-13 13:06:36 20 0
1 条回答
写回答
取消 提交回答
  • 开发者社区问答官方账号
    官方回答
    采纳回答
    问题描述:mysql一键实时同步datahub:datahub对于mysql源端在中间进行字段添加, 目的端datahub只支持topic schema添加在尾端在实时同步任务的执行过程中 全量同步任务节点批量冒烟执行 该阶段会出现字段映射失败导致脏数据的情况。
    解决方案:目前一键datahub的方案,如果mysql端中间加了列,那datahub最后加了列(因为datahub只支持最后加列),目前不支持等列映射的,可以在mysql源端尾部加列实时同步到datahub。
    2024-06-13 13:06:37
    赞同 1 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载

相关镜像