数据架构问题之为什么说Lambda架构给开发和运维带来了“深重的灾难”

简介: 数据架构问题之为什么说Lambda架构给开发和运维带来了“深重的灾难”

问题一:Lambda架构的主要逻辑是什么?



参考答案:

任务与批任务读取相同的数据源,实时计算结果由流任务产出;批任务通常按天执行,计算T-1的数据,并写入到结果表中。最终数据应用根据自己的需要对两个结果表的结果进行合并。



关于本问题的更多回答可点击进行查看:

https://developer.aliyun.com/ask/616723



问题二:Lambda架构的核心思路是什么?



参考答案:

用流任务保证结果的实时性,同时用批任务保证结果的最终一致性。



关于本问题的更多回答可点击进行查看:

https://developer.aliyun.com/ask/616724



问题三:哪些业务团队通常会采用Lambda架构?



参考答案:

凡是对结果有实时性要求的业务团队,在数据侧基本都采用的是Lambda架构。



关于本问题的更多回答可点击进行查看:

https://developer.aliyun.com/ask/616725



问题四:Lambda架构有哪些显而易见的缺点?



参考答案:

Lambda架构有几个显而易见的缺点,包括需要开发、维护两套系统,成本太大,以及两套系统难以保证计算口径的一致,甚至不同计算引擎提供的计算语义完全不同。



关于本问题的更多回答可点击进行查看:

https://developer.aliyun.com/ask/616726



问题五:为什么说Lambda架构给开发和运维带来了“深重的灾难”?



参考答案:

因为Lambda架构需要开发和维护两套系统,这增加了开发和运维的复杂性和成本。同时,两套系统难以保证计算口径的一致,这可能导致数据的不一致性和其他问题,因此给开发和运维带来了挑战和困难。



关于本问题的更多回答可点击进行查看:

https://developer.aliyun.com/ask/616727

相关文章
|
8月前
|
机器学习/深度学习 运维 监控
别让运维只会“救火”——用数据点燃业务增长的引擎
别让运维只会“救火”——用数据点燃业务增长的引擎
303 12
|
9月前
|
机器学习/深度学习 存储 运维
数据别乱跑!聊聊智能运维如何减少数据丢失风险
数据别乱跑!聊聊智能运维如何减少数据丢失风险
228 4
|
9月前
|
机器学习/深度学习 人工智能 运维
云架构不是养祖宗,智能运维教你省心又省钱
云架构不是养祖宗,智能运维教你省心又省钱
236 2
|
9月前
|
数据采集 运维 数据可视化
AR 运维系统与 MES、EMA、IoT 系统的融合架构与实践
AR运维系统融合IoT、EMA、MES数据,构建“感知-分析-决策-执行”闭环。通过AR终端实现设备数据可视化,实时呈现温度、工单等信息,提升运维效率与生产可靠性。(238字)
|
10月前
|
机器学习/深度学习 运维 监控
运维不怕事多,就怕没数据——用大数据喂饱你的运维策略
运维不怕事多,就怕没数据——用大数据喂饱你的运维策略
968 0
|
11月前
|
SQL 存储 运维
别让运维数据“各过各的”:聊聊数据湖怎么搭,才能不成“沼泽”
别让运维数据“各过各的”:聊聊数据湖怎么搭,才能不成“沼泽”
389 0
|
10月前
|
数据采集 缓存 前端开发
如何开发门店业绩上报管理系统中的商品数据板块?(附架构图+流程图+代码参考)
本文深入讲解门店业绩上报系统中商品数据板块的设计与实现,涵盖商品类别、信息、档案等内容,详细阐述技术架构、业务流程、数据库设计及开发技巧,并提供完整代码示例,助力企业构建稳定、可扩展的商品数据系统。
|
8月前
|
运维 Prometheus 监控
别再“亡羊补牢”了!——聊聊如何优化企业的IT运维监控架构
别再“亡羊补牢”了!——聊聊如何优化企业的IT运维监控架构
340 8
|
9月前
|
数据采集 机器学习/深度学习 搜索推荐
MIT新论文:数据即上限,扩散模型的关键能力来自图像统计规律,而非复杂架构
MIT与丰田研究院研究发现,扩散模型的“局部性”并非源于网络架构的精巧设计,而是自然图像统计规律的产物。通过线性模型仅学习像素相关性,即可复现U-Net般的局部敏感模式,揭示数据本身蕴含生成“魔法”。
378 3
MIT新论文:数据即上限,扩散模型的关键能力来自图像统计规律,而非复杂架构
|
9月前
|
运维 监控 机器人
别等出事才救火:实时监控数据才是运维的救命稻草
别等出事才救火:实时监控数据才是运维的救命稻草
267 8

热门文章

最新文章