开发者社区 问答 正文

关于Flink DateSet读取数据方式的疑惑

image
spark的批处理,是先将全部数据读取到内存中,然后在进行计算,官方文档上表示flink的批处理可以当作有限的流来处理,按照字面意思,应该是类似流处理一样,一边读数据,一边计算处理。想请问一下,是这样理解的吗?如果是这样的话,对内存硬件的要求就会大大降低,在网上没有找到明确的说明,有了解的朋友请帮忙解答一下,谢谢!

展开
收起
龙火火 2018-11-22 12:08:12 1766 分享 版权
0 条回答
写回答
取消 提交回答