开发者社区 > 大数据与机器学习 > 正文

大佬 flink cdc 抽取业务库change log的时候有脏数据,可以通过什么参数过滤吗?

大佬 flink cdc 抽取业务库change log的时候有脏数据,可以通过什么参数过滤吗?理论上应该是有的,要不然脏数据如何处理image.png 这样的,是的,大佬,这个应该是由于业务人员手动插入导致的,但是我在想能不能过滤掉,他这个编码应该不是针对整张表,而是各别列image.png image.png 我今天上午请教你的那个运行源码中的样例失败,是由于他那个测试调用的一个docker执行脚本是Linux的格式,而我的docker是本地的所有执行不起来,修改为winsow格式就行了

展开
收起
cuicuicuic 2023-05-23 18:40:09 71 0
1 条回答
写回答
取消 提交回答
  • 不清楚哎,你指的啥样的数据是脏数据,相对于正常的数据,这不是编码问题吗?,此回答整理自钉群“Flink CDC 社区”

    2023-05-23 18:47:46
    赞同 展开评论 打赏

大数据领域前沿技术分享与交流,这里不止有技术干货、学习心得、企业实践、社区活动,还有未来。

相关产品

  • 实时计算 Flink版
  • 日志服务
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载