AI 助理
备案控制台
开发者社区 问答 正文

一个分区为1的kafka source，parallelism为2，但是两个watermark却不一样

转自钉钉群21789141：一个分区为1的kafka source，parallelism为2，但是两个watermark却不一样
watermark 是用的BoundedOutOfOrdernessTimestampExtractor
image
一个是负数，一个正常，但是下游的算子收到的water却是正常的那个

展开
收起
赵慧@ApacheFlink中文社区 2018-10-18 12:30:12 2332 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 赵慧@ApacheFlink中文社区

    云邪：两个 source 都有数据吗，分区为1的 kafka source，2个并发去读，应该只有1个并发能读到数据，所以另一个并发的 watermark 一直是 Long.MIN

    2019-07-17 23:09:06
    赞同 展开评论
问答分类：
消息中间件 Kafka 云消息队列 Kafka 版
问答标签：
云消息队列 Kafka 版分区 云消息队列 Kafka 版source 分区云消息队列 Kafka 版 云消息队列 Kafka 版parallelism
问答地址：
开发者社区 > 微服务 > 问答
相关问答
如何在vvp作业中定义Kafka作为数据源（Source）的临时表？
76
1
0
kafka可以一个topic得多个分区在同一个broker上吗？
225
1
0
jar作业的方式，kafka作为source 是只要有消息投递 flink这边就会消费么？
70
1
0
在Flink CDC中MySQL整库同步，Kafka Pipeline 不支持指定 分区吗？
121
1
0
在Flink CDC中写入kafka，这个默认是根据什么分区的，表的主键吗？
124
1
0
消息队列Kafka版Topic分区数可以减少吗
135
1
0
mongo source cdc + kafka sink connector这个组合支持吗？
70
0
0
消息队列Kafka版每个规格赠送分区多少
61
1
0
为什么消息队列Kafka版的生产者只往一个分区写入消息
83
0
0
消息队列Kafka版Group堆积直接增加分区后挤压的数据是否会乱序
72
0
0