AI 助理
备案控制台
开发者社区 大数据与机器学习 实时计算 Flink 正文

Flink 的kafka source 如何指定位点和分区消费？

Flink 的kafka source 如何指定位点和分区消费？

展开
收起
wenti 2023-01-16 20:03:32 987 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

2 条回答
写回答
取消 提交回答
  • 665661

    https://nightlies.apache.org/flink/flink-docs-release-1.16/docs/connectors/datastream/kafka/——该回答整理自钉群“【③群】Apache Flink China社区“

    2023-01-16 21:32:28
    赞同 展开评论
  • 认真学习的heart

    Flink 的 Kafka Source 可以通过指定 Kafka 的位点和分区来指定消费。可以使用 Kafka 的 ConsumerConfig 类来设置消费者的位点和分区，然后将这些配置传递给 Flink 的 Kafka Source 以指定消费。

    2023-01-16 21:07:35
    赞同 展开评论
问答分类：
消息中间件 Kafka 流计算 实时计算 Flink版 云消息队列 Kafka 版
问答标签：
实时计算 Flink版kafka 云消息队列 Kafka 版分区 云消息队列 Kafka 版flink 实时计算 Flink版Source 云消息队列 Kafka 版source
问答地址：
开发者社区 > 大数据与机器学习 > 实时计算 Flink > 问答
相关问答
实时计算 Flink版
flink作为source jar作业代码里面消费位点的订阅方式 和控制台的有无状态启动有冲突吗？
92
1
0
flink cdc datastream方式同步mysql数据到kafka，多分区怎么保证有序性？
132
1
0
DataWorks中odps+flink数据同步，odps在数据地图上已经能看到分区了？
120
0
0
kafka可以一个topic得多个分区在同一个broker上吗？
224
1
0
flink sink为 maxcompute时如何配置 ts字段按每个月分区？
99
0
0
kafka topic多个分区，同一个broker是什么情况？
72
0
0
在Flink CDC中， 这个参数有 flinkcdc的 source参数配置吗？
99
0
0
在Flink CDC中如下是这个参数控制保留hive 多久的分区吗？
101
0
0
在Flink CDC中这种配置，会自动删除超过30天前的hive分区吗？
92
0
0
在Flink CDC中MySQL整库同步，Kafka Pipeline 不支持指定 分区吗？
121
1
0
大数据与机器学习

实时计算 Flink

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎，提高作业开发运维效率。

我要提问
收录在圈子:
阿里云实时计算Flink
199213
+ 订阅
实时计算 Flink 版（Alibaba Cloud Realtime Compute for Apache Flink，Powered by Ververica）是阿里云基于 Apache Flink 构建的企业级、高性能实时大数据处理系统，由 Apache Flink 创始团队官方出品，拥有全球统一商业化品牌，完全兼容开源 Flink API，提供丰富的企业级增值功能。

相关文章

  • Linux环境下 java程序提交spark任务到Yarn报错
  • 云原生进化论：加速构建 AI 应用
  • 【JUC】（3）常见的设计模式概念分析与多把锁使用场景！！理解线程状态转换条件！带你深入JUC！！文章全程笔记干货！！
  • 实时库存同步接口技术详解
  • 如何设计10亿用户级的微博Feed流系统并应对100W QPS的挑战？

    • 热门讨论

    热门文章

  • Flink CDC任务从savepoint/checkpoints状态中恢复作业错误问题
  • 在斗鱼，实时计算发展的历程如何？
  • FlinkCDC MySQL 中 scan.startup.mode 用的是什么模式啊？
  • Flink CDC中，有哪位大佬有flink 版本和cdc版本的适配统计啊？
  • 在Flink CDC中ogg可以做实时同步吗？
  • 如何用实时数据同步打破企业数据孤岛？
  • 对于Flink CDC，各位同步oracle数据库的时候有延迟都怎么搞的啊？
  • flink 1.15.3 standalone 模式，其中一个任务发生重启，导致集群都挂了 又遇到?
  • flink standalone模式调用job/stop接口任务停不了，显示重启中。知道怎么回事嘛?
  • Flink CDC里oracel cdc 的延时很大什么原因？
    • 展开全部
  • 数据仓库介绍与实时数仓案例
  • 独家专访阿里集团副总裁贾扬清：我为什么选择加入阿里巴巴？
  • 实时计算 Flink SQL 核心功能解密
  • 通过Flink实时构建搜索引擎的索引
  • 阿里云实时计算产品案例&解决方案汇总
  • 接着！！Apache Flink 全领域干货合集（持续更新）
  • Flink SQL 功能解密系列 —— 流式 TopN 挑战与实现
  • Apache Flink 的迁移之路，2 年处理效果提升 5 倍
  • Apache Flink 漫谈系列(04) - State
  • Flink SQL 功能解密系列 —— 数据去重的技巧和思考
    • 展开全部
    还有其他疑问?
    咨询AI助理