开发者社区> 问答> 正文

Flink SQL kafka connector有办法获取到partition、offset信息嘛

如题,需要获取到kafka的partition、offset进行处理 *来自志愿者整理的flink邮件归档

展开
收起
JACKJACK 2021-12-08 15:51:51 2165 0
1 条回答
写回答
取消 提交回答
  • 对的是我!

    你好,可以获取 CREATE TABLE KafkaTable ( event_time TIMESTAMP(3) METADATA FROM 'timestamp', partition BIGINT METADATA VIRTUAL, offset BIGINT METADATA VIRTUAL, user_id BIGINT, item_id BIGINT, behavior STRING ) WITH ( 'connector' = 'kafka', 'topic' = 'user_behavior', 'properties.bootstrap.servers' = 'localhost:9092', 'properties.group.id' = 'testGroup', 'scan.startup.mode' = 'earliest-offset', 'format' = 'csv' );

    可以查阅官网得到你想要的信息: https://ci.apache.org/projects/flink/flink-docs-release-1.12/dev/table/connectors/kafka.html#available-metadata 希望能帮助到你。*来自志愿者整理的flink邮件归档

    2021-12-08 16:49:13
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Java Spring Boot开发实战系列课程【第16讲】:Spring Boot 2.0 实战Apache Kafka百万级高并发消息中间件与原理解析 立即下载
MaxCompute技术公开课第四季 之 如何将Kafka数据同步至MaxCompute 立即下载
消息队列kafka介绍 立即下载