《云原生一站式数据库技术与实践》——一、云原生分布式数据库PolarDB-X技术架构(7) https://developer.aliyun.com/article/1231696?groupCode=aliyundb
未来,PolarDB-X 将持续往一体化方向演进。
包括集中分布式一体化:要使分布式数据库更加接近于单机数据库的体验;负载处理一体化:能够处理transaction 和analytic 的负载。也包括在线和历史数据一体化,与云的基础设施更加深度的融合,利用云底下的共享存储、云的芯片做硬件结合的一体化。
事务处理与分析一体化利用CDC 做实时同步,存放到云存储上,以列式的压缩格式做存储。同时CN 也支持行列混合的分析查询,对优化器具有较高要求,需要能够识别出处理事务与查询事务,判断将其放于行存执行还是列存上执行,计算具体的cost。
未来,我们也计划通过ADB 数仓利用大规模数据分析的计算引擎做一体化的分析工作。
云原生与分布式融合一体化架构也是未来发展趋势。
目前所有的DN 数据存储在本地磁盘,未来会将其存储到共享存储池,这是未来分布式数据库发展的重要方向。
我们在做扩展时应尽量不动数据,而是实时或独立地扩展计算节点和存储节点。扩展了节点以后,数据要做大量搬迁工作。而如果底下是共享存储,则无须进行搬迁工作,新增节点后即可投入服务。
另外,共享存储能够存储的数据量会远远超过单机的数据规模,也更有可能减少数据跨分区的可能性,从而有效减少分布式事务带来的代价。
如何更好地利用云的基础设施提供更好的扩展能力以及弹性能力的分布式数据库,是未来云原生分布式数据库的重要发展方向。