问下大佬们就是flink upsert kafka sink 删除数据的时候是只能收到null值吗？
问下大佬们就是flink upsert kafka sink 删除数据的时候是只能收到null值吗，那这种的话我这边如何判断是删除了哪条数据呢？
展开
收起
2
条回答
写回答
写回答
-
发表文章、提出问题、分享经验、结交志同道合的朋友是的，要想判断是删除了哪条数据，可以在发送到 Kafka Sink 之前在 Flink 应用程序中记录一些元数据，比如时间戳、原始数据的 key 或其他标识符等信息。然后在 Kafka Sink 中，可以根据元数据来确定是哪条数据被删除了。
2023-03-21 18:19:13赞同 展开评论 打赏 -
upsert–kafka作为消费者的时候依据主键会给你最终的数据，不必关注历史版本。 此答案整理自钉群“Flink CDC 社区”
2023-03-21 16:44:06赞同 展开评论 打赏
问答地址：
开发者社区
>
大数据与机器学习
>
大数据开发治理DataWorks
>
问答
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎，为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。
热门讨论
热门文章
如果不同的RAM子账号由于权限分配原因，看不到别的工作空间下的任务名称，如果重名了怎么办？
469
数据来源：com.alibaba.fastjson.JSONException: syntax er
5452
dataworks里面的stg层、ods层、dwd层、dws层、是怎么分层的呢？
2525
请教一下DataWorks，doris和starRocks 选型，选哪个？
1346
Dataphin和 Dataworks 有啥区别呢？
1779
DataWorks中sql查询数字变成了科学计数 怎么转为普通数字？
833
离线同步报错Communications link failure，该如何处理？
973
为什么DataWorks中MySQL同步报错Consider raising value of 'n
982
DataWorks中quota not enough的原因有哪些？
976
DataWorks中odps SQL 参数 如何获取前一天的yyyymm？
868
展开全部
DataWorks售前咨询
7918
DataWorks：新一代 Data+AI 数据开发与数据治理平台演进
94
数据中台的智能进化—阿里巴巴十二年数据平台发展历程
9120
2万字揭秘阿里巴巴数据治理平台DataWorks建设实践
27756
【2023云栖】田奇铣：大模型驱动DataWorks数据开发治理平台智能化升级
59239
DataWorks操作报错合集之错误提示“ODPS-0130161: Parse exception - invalid token 'WITH', expect 'SEMICOLON'”，该怎么办
476
DataWorks产品使用合集之如何解决查询列数太多不展示结果
150
欢迎加入DataWorks产品钉钉交流群
36703
【全新系列】DataWorks百问百答
28382
DataWorks数据集成离线增量同步配置讲解
4013
展开全部
相关电子书
更多
