开发者社区> 问答> 正文

Blink的批量模式的并行度问题

大家好,

Flink 当前的blink table planner 批处理模式 (读hdfs上的orc文件)只支持StreamTableSource和LookupableTableSource, 但是StreamTableSource的并行度默认应该是1,可能是ContinuousFileMonitoringFunction , 那如何能扩大并行度来优化性能呢?*来自志愿者整理的flink邮件归档

展开
收起
小阿怪 2021-12-07 10:06:36 534 0
1 条回答
写回答
取消 提交回答
  • 你好,

    如果你是FileInputFormat,默认就是1个并行度,这个参数我尝试了并像, 看代码是创建了一个SingleOutputStreamOperator,感觉得重写下我使用的OrcInputFormat, 让他不继承FileInputFormat,像源码里的HiveInputFormat一样*来自志愿者整理的flink邮件归档

    2021-12-07 11:42:53
    赞同 展开评论 打赏
问答地址:
问答排行榜
最热
最新

相关电子书

更多
阿里云流计算 Flink SQL 核心功能解密 立即下载
阿里云流计算Flink SQL核心功能解密 立即下载
任庆盛|Flink CDC + Kafka 加速业务实时化 立即下载