数据架构问题之流批一体在数据分析型应用中的价值是什么-阿里云开发者社区

数据架构问题之流批一体在数据分析型应用中的价值是什么

2024-07-21 28

版权

本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

简介： 数据架构问题之流批一体在数据分析型应用中的价值是什么

参考答案：

是的，具体如何使用流批一体要根据应用类型而定。这既决定了流批一体与数据架构的关系，也体现了流批一体在不同场景下的价值。

关于本问题的更多回答可点击进行查看：

参考答案：

在于如何实现输入统一，因为流任务和批任务对输入的要求是不一样的。

关于本问题的更多回答可点击进行查看：

参考答案：

为了保证输入统一，我们可以让流任务直接读取消息队列中的数据，同时周期性地将消息队列中的数据落盘，然后每日单独处理当天的增量数据，这样批任务也能周期性处理增量数据，从而实现输入统一。

关于本问题的更多回答可点击进行查看：

参考答案：

在理想情况下，当批任务处理完T-1的数据并输出结果时，这个结果应该与流任务先前输出的T-1的结果相同。

关于本问题的更多回答可点击进行查看：

参考答案：

流批一体在数据分析型应用中是Lambda架构的一种高级实现，它解决了原Lambda架构中需要开发两套代码、维护两套系统以及计算逻辑口径不一致的问题。

关于本问题的更多回答可点击进行查看：

数据架构问题之流批一体在数据分析型应用中的价值是什么