Lambda 架构的原理是什么？它存在哪些问题？

随着实时计算技术的兴起，出现了 Lambda 架构。Lambda 架构的原理是相当于在传统离线数仓的基础上再加上一个处理实时数据的层，然后将离线数 仓和实时链路产生的数据在 Serving 层进行 Merge，以此来对离线产生的数据和实时产生 的数据进行查询。 从 2011 年至今，Lambda 架构被多数互联网公司所采纳，也确实解决了一些问题，但 是随着数据量的增大、应用复杂度的提升，其问题也逐渐凸显，主要有： 由多种引擎和系统组合而成，开发和维护成本高，学习成本高；  数据在不同的 View 中存储多份，空间浪费，数据一致性的问题难以解决；  从使用上来说，Batch，Streaming 以及 Merge Query 等处理过程中均使用不同的 language，使用起来并不容易；  学习成本非常高，增大了应用成本。