开发者社区> 问答> 正文

请问一下 现在有一个场景 在mysql中对数据进行处理发现时间太长 就拿着mysql中的原始数据到FLink来完成加工逻辑 但是发现时间更长了 Flink job时间: 直接查询时间: 是我使用FLink的方式不对 还是Flink不适合这种场景

转自钉钉群21789141:请问一下 现在有一个场景 在mysql中对数据进行处理发现时间太长 就拿着mysql中的原始数据到FLink来完成加工逻辑 但是发现时间更长了 Flink job时间: 直接查询时间: 是我使用FLink的方式不对 还是Flink不适合这种场景

image
image

展开
收起
赵慧@ApacheFlink中文社区 2019-01-22 18:35:42 3713 0
1 条回答
写回答
取消 提交回答
  • 鲁尼: 看场景,如果你大部分时间花在计算上,flink可能是可以加速的(不过我看你的截图里,flink这边计算的并发也不大)。如果大量时间花在扫描数据上,用flink也解决不了

    问:Kurt 请问一下 这种大量时间花在扫描数据上的工作 Flink能够提供一些帮助吗?

    鲁尼:得想办法在source上并行起来,比如分库分表

    2019-07-17 23:26:23
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Flink CDC Meetup PPT - 龚中强 立即下载
Flink CDC Meetup PPT - 王赫 立即下载
Flink CDC Meetup PPT - 覃立辉 立即下载

相关镜像