开发者社区> 问答> 正文

Flink SQL 1.12 批量数据导入,如何加速性能

我目前有个场景, 需要通过基于Flink SQL 进行历史数据导入, 比如Source 端是一张MYSQL 表, Sink端 也是一张MSYQL 表, 我通过Flink SQL 无论怎么加大并行度, 都是单并行度导入,速率很慢, 请问有什么需要配置的吗? 或者其他解决方案 可以基于SQL进行大批量数据导入,数十亿量级。*来自志愿者整理的flink邮件归档

展开
收起
彗星halation 2021-12-02 17:26:35 1085 0
1 条回答
写回答
取消 提交回答
  • 我通过 Flink SQL 无论怎么加大并行度, 都是单并行度导入 你是如何加大并行度的?除 source 外其他节点也是单并行度吗,还是说可以成功加大?能否分享一下你的SQL便于解答? *来自志愿者整理的FLINK邮件归档

    2021-12-02 18:04:11
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
SQL Server在电子商务中的应用与实践 立即下载
GeoMesa on Spark SQL 立即下载
原生SQL on Hadoop引擎- Apache HAWQ 2.x最新技术解密malili 立即下载