开发者社区> 问答> 正文

请教大家一个问题,spark stream连kafka,在web页面的stream标签,显示好多batch处于queued状态,这些batch是已经把数据从kafka读取进rdd,等待处理,还是还没有从kafka读取数进rdd?

社区小助手 2019-01-15 15:28:46 515

请教大家一个问题,spark stream连kafka,在web页面的stream标签,显示好多batch处于queued状态,这些batch是已经把数据从kafka读取进rdd,等待处理,还是还没有从kafka读取数进rdd?
803AB23A_D7BB_4384_9A3A_37D5AAD5CCAA

消息中间件 分布式计算 Kafka Spark
分享到
取消 提交回答
全部回答(1)
  • 社区小助手
    2019-07-17 23:25:35

    最直接的想法, 如果读取数据, 那么多数据放到内存, 内存早就over了.

    0 0
+ 订阅

大数据计算实践乐园,近距离学习前沿技术

推荐文章
相似问题
推荐课程