问下大佬们就是flink upsert kafka sink 删除数据的时候是只能收到null值吗？
问下大佬们就是flink upsert kafka sink 删除数据的时候是只能收到null值吗，那这种的话我这边如何判断是删除了哪条数据呢？
展开
收起
2
条回答
写回答
写回答
-
发表文章、提出问题、分享经验、结交志同道合的朋友是的，要想判断是删除了哪条数据，可以在发送到 Kafka Sink 之前在 Flink 应用程序中记录一些元数据，比如时间戳、原始数据的 key 或其他标识符等信息。然后在 Kafka Sink 中，可以根据元数据来确定是哪条数据被删除了。
2023-03-21 18:19:13赞同 展开评论 打赏 -
upsert–kafka作为消费者的时候依据主键会给你最终的数据，不必关注历史版本。 此答案整理自钉群“Flink CDC 社区”
2023-03-21 16:44:06赞同 展开评论 打赏
问答地址：
开发者社区
>
大数据与机器学习
>
大数据开发治理DataWorks
>
问答
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎，为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。
热门讨论
热门文章
数据来源：com.alibaba.fastjson.JSONException: syntax er
5488
请教一下DataWorks，doris和starRocks 选型，选哪个？
1371
dataworks里面的stg层、ods层、dwd层、dws层、是怎么分层的呢？
2556
如果不同的RAM子账号由于权限分配原因，看不到别的工作空间下的任务名称，如果重名了怎么办？
497
Dataphin和 Dataworks 有啥区别呢？
1804
离线同步报错Communications link failure，该如何处理？
986
数据服务报429请求次数过多咋办呀
1865
DataWorks中odps SQL 参数 如何获取前一天的yyyymm？
889
请问 Argument list too long怎么解决？
1428
DataWorks我该如何访问A项目安装了项目的package资源？
1911
展开全部
DataWorks智能数据建模全面公测开始啦！
3841
DataWorks售前咨询
7957
2万字揭秘阿里巴巴数据治理平台DataWorks建设实践
27793
数据中台的智能进化—阿里巴巴十二年数据平台发展历程
9144
DataWorks：新一代 Data+AI 数据开发与数据治理平台演进
111
【2023云栖】田奇铣：大模型驱动DataWorks数据开发治理平台智能化升级
59255
DataWorks操作报错合集之错误提示“ODPS-0130161: Parse exception - invalid token 'WITH', expect 'SEMICOLON'”，该怎么办
488
DataWorks操作报错合集之在尝试连接到MySQL数据库时遇到了“Communications link failure”错误，如何解决
221
【全新系列】DataWorks百问百答
28388
阿里云DataWorks荣获DAMA中国数据治理优秀产品奖
1919
展开全部
相关文章
相关电子书
更多
