开发者社区> 问答> 正文

关于flink sql 1.10 source并行度自动推断的疑问

之前用flink sql查询hive的数据,hive的数据文件是150个,sql client配置文件设置的并行度是10,source通过自动推断生成了150并发,但是通过看web ui发现只有前十个子任务是读到数据了,其他的任务显示没有读到数据,请问是我设置有问题吗?*来自志愿者整理的flink邮件归档

展开
收起
玛丽莲梦嘉 2021-12-02 16:43:22 907 0
1 条回答
写回答
取消 提交回答
  • 你的数据量有多大?有一个可能的原因是source的其他并发调度起来的时候,数据已经被先调度起来的并发读完了。*来自志愿者整理的FLINK邮件归档

    2021-12-02 17:38:53
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Flink CDC Meetup PPT - 龚中强 立即下载
Flink CDC Meetup PPT - 王赫 立即下载
Flink CDC Meetup PPT - 覃立辉 立即下载