Blink对是否对迭代进行了优化？
各位，我想请教一下，Blink是否对Flink的迭代进行了优化?如果优化了的话是对批处理进行的优化还是流计算进行的优化？主要采用了哪些优化技术？ 我前两天用flink1.4.2和Blink自带的example中streaming中的Iteation例子进行了实验对比，数据就是两个小于100的整数，看他们迭代几次相加能够超过100.我生成了1500条数据，两个集群时间差不多都是7-8s，但是我把相同的数据复制了4份，即6000条，用Blink处理依然是7-8s，但是flink1.4.2是36-40min。感觉很奇怪，我从100条依次往上翻倍赋值的时候两个引擎时间都差不多，但是超过一定数量后，flink1.4.2就突然变得特变慢。而Blink不变。我如果直接用6000条不重复的数据，两个引擎时间都要超过10多个小时（还没跑完）。是集群配置的原因还是其他的原因呢？*来自志愿者整理的flink邮件归档
展开
收起
1
条回答
写回答
写回答
-
Blink 目前没有对迭代进行特别优化。不过Blink是基于社区1.5.1版本的，建议你用Flink 1.5.1版本测试一下看看是不是还是有区别。*来自志愿者整理的flink
2021-12-07 15:34:23赞同 展开评论 打赏
问答分类：
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
问答排行榜
最热
最新
推荐问答
