开发者社区 > 大数据与机器学习 > 开源大数据平台 E-MapReduce > 正文

spark写kafka,如何让分区分布均衡呢?

spark写kafka,如何让分区分布均衡呢? f8baaba8a06209af5a40242e04757bec.png

展开
收起
爱喝咖啡嘿 2022-12-21 13:22:09 334 0
1 条回答
写回答
取消 提交回答
  • 是因为没有指定key吗,你把topic删除重新建然后重新跑——此答案整理自钉群“HBase生态+Spark社区大群”

    2022-12-21 15:36:09
    赞同 展开评论 打赏

阿里云EMR是云原生开源大数据平台,为客户提供简单易集成的Hadoop、Hive、Spark、Flink、Presto、ClickHouse、StarRocks、Delta、Hudi等开源大数据计算和存储引擎,计算资源可以根据业务的需要调整。EMR可以部署在阿里云公有云的ECS和ACK平台。

相关电子书

更多
Java Spring Boot开发实战系列课程【第16讲】:Spring Boot 2.0 实战Apache Kafka百万级高并发消息中间件与原理解析 立即下载
MaxCompute技术公开课第四季 之 如何将Kafka数据同步至MaxCompute 立即下载
消息队列kafka介绍 立即下载