问题一:Flink流批一体在架构层面有哪些演进?
Flink流批一体在架构层面有哪些演进?
参考回答:
在架构层面,Flink流批一体的演进包括同一个作业可以同时处理有限数据集和无限数据集;connector框架可以同时对接流式存储和批式存储,做到一套代码可以处理两套数据源;运行层面,一套调度框架可以同时适用于流和批的作业;流批shuffle是pluggable的,复用一套shuffle接口。
关于本问题的更多回答可点击原文查看:
https://developer.aliyun.com/ask/671993
问题二:阿里巴巴实时计算团队开源了什么项目,它与Flink流批一体有何关联?
阿里巴巴实时计算团队开源了什么项目,它与Flink流批一体有何关联?
参考回答:
阿里巴巴实时计算团队在今年开源了存算分离的Remote Shuffle Service,该项目放在Flink开源项目的Flink-extended子项目组里面。Remote Shuffle Service是Flink流批一体架构演进中的一个重要组成部分,它支持流批shuffle的复用。
关于本问题的更多回答可点击原文查看:
https://developer.aliyun.com/ask/671994
问题三:Flink-extended子项目组包含哪些内容?
Flink-extended子项目组包含哪些内容?
参考回答:
Flink-extended子项目组包含了很多Flink生态项目,如Remote Shuffle Service等,这些项目与Flink的流批一体、云原生等方向紧密相关,有兴趣的同学可以去看一看。
关于本问题的更多回答可点击原文查看:
https://developer.aliyun.com/ask/671995
问题四:哪个talk介绍了Flink Runtime在流批一体方面的新进展?
哪个talk介绍了Flink Runtime在流批一体方面的新进展?
参考回答:
核心技术专场中的“面向流批一体的 Flink Runtime 新进展”这个talk详细介绍了Flink Runtime在流批一体架构演进方面的新进展。
关于本问题的更多回答可点击原文查看:
https://developer.aliyun.com/ask/671996
问题五:对Flink Connector社区新动向与Hybrid Source原理实践感兴趣应参考哪个talk?
对Flink Connector社区新动向与Hybrid Source原理实践感兴趣应参考哪个talk?
参考回答:
对Flink Connector社区新动向与Hybrid Source原理实践感兴趣的同学可以参考核心技术专场中的“Flink Connector社区新动向与Hybrid Source原理实践”这个talk。
关于本问题的更多回答可点击原文查看: