开发者社区> 问答> 正文

当数据源 source 消费不均匀时,数据倾斜的现象如何解决?

已解决

当数据源 source 消费不均匀时,数据倾斜的现象如何解决?

展开
收起
詹姆斯邦德00 2022-10-17 11:33:42 314 0
1 条回答
写回答
取消 提交回答
  • 推荐回答

    解决思路:通过调整并发度,解决数据源消费不均匀或者数据源反压的情况。例如kafka数据源,可以调整 KafkaSource 的并发度解决消费不均匀。调整并发度的原则:KafkaSource 并发度与 kafka 分区数是一样的,或者 kafka 分区数是Kafka-Source 并发度的整数倍。

    以上内容摘自《企业级云原生白皮书项目实战》电子书,点击https://developer.aliyun.com/ebook/download/7774可下载完整版

    2022-10-17 19:45:17
    赞同 展开评论 打赏
来源圈子
更多
收录在圈子:
阿里云开发者社区官方技术圈,用户产品功能发布、用户反馈收集等。
问答排行榜
最热
最新

相关电子书

更多
FLINK在大规模实时无效广告流量检测中的应用 立即下载
事务、全局索引、透明分布式 立即下载
Flink中的两类新型状态存储 立即下载

相关实验场景

更多