开发者社区> 问答> 正文

kafka的多分区watermark?

在官网看到对于Kafka分区的时间戳定义描述,给出了示例,如下图:

FlinkKafkaConsumer09 kafkaSource = new

FlinkKafkaConsumer09<>("myTopic", schema,

props);kafkaSource.assignTimestampsAndWatermarks(new

AscendingTimestampExtractor () {

@Override

public long extractAscendingTimestamp(MyType element) {

return element.eventTimestamp();

}});

DataStream stream = env.addSource(kafkaSource);

不太理解这个里面泛型传的是用户定义的case class,还是传ConsumerRecord,从他里面提取时间戳*来自志愿者整理的flink邮件归档

展开
收起
又出bug了-- 2021-12-02 11:24:53 499 0
1 条回答
写回答
取消 提交回答
  • Hi,没有太理解你的意思,这个MyType只是说你可以把Kafka的数据反序列化后使用,像SimpleStringSchema默认是String,你可以对他进行解析*来自志愿者整理的FLINK邮件归档

    2021-12-02 14:09:06
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
任庆盛|Flink CDC + Kafka 加速业务实时化 立即下载
消息队列 Kafka 版差异化特性 立即下载
2019大数据技术公开课第五季—kafka 数据如何同步到 MaxCompute 立即下载