分析数据库服务(ADS)极速驱动大数据商业变革

简介:

根据IDC 2013年发布的数字宇宙研究报告(Digital Universe)显示,在接下来的8年中,我们所产生的数据量将超过40 ZB(泽字节)!作为大数据特征中最重要的Volume(容量)、Velocity(数据生产速度)的两个原始特征都在发生急剧变化,使得数据处理从业务系统的一部分演变得愈发独立,企业需要加速数据分析和挖掘过程,并由报表展现为主到强调数据洞察转型,让数据直接快速产生价值(Value)。

 

在业务系统中,我们通常使用的是 OLTP(OnLine Transaction Processing ,联机事务处理)系统来处理数据,如 MySQL、Microsoft SQL Server、Oracle等关系数据库,这些数据库对应到我们云上的产品,便是RDS等关系数据库服务。这些关系数据库系统擅长事务处理,在数据操作中严格遵循ACID原则,能够很好的支持高并发的数据插入和修改;但是一旦需要进行统计分析类计算并且记录数超过千万甚至十亿级别,或需要进行非常复杂的计算过滤时,OLTP类数据库系统便力不从心了。

 

另一类计算系统,则更适合海量数据以固定的模式进行分析和处理,例如开源的Hive(Hadoop底层)、SPARK SQL(SPARK

底层)离线计算系统,以及阿里云上的ODPS开放数据处理服务等,可以计算万亿条,数百TB甚至更多的数据,但是一般很难应对需要高并发(例如100QPS以上)或者实时响应(计算响应时间在3s以下)的业务场景。

 

而分析数据库服务ADS,是一套RT-OLAP(Realtime OLAP,实时 OLAP)系统。在数据存储模型上,采用自由灵活的关系模型存储,可以使用 SQL进行自由灵活的计算分析,无需预先建模;而利用分布式计算技术,ADS可以在处理百亿条甚至更多量级的数据上达到甚至超越MOLAP类系统的处理性能,真正实现百亿数据毫秒级计算。

 

ADS让海量数据和实时与自由的计算可以兼得,实现了速度驱动的大数据商业变革。一方面,ADS拥有快速处理百亿级别的大数据的能力,使得数据分析中使用的数据可以不再是抽样的,而是业务系统中产生的全量数据,使得数据分析的结果具有最大的代表性。而更重要的是,ADS采用分布式计算技术,拥有强大的实时计算能力,通常可以在数百毫秒内完成十亿百亿的数据计算,使得使用者可以根据自己的需求在海量数据中自由的进行探索,而不是根据预先设定好的固定逻辑查看已有的数据报表。

 

同时,由于 ADS 能够支撑较高并发查询,并且通过动态的多副本数据存储容错机制以及长尾容忍技术来保证较高的系统可用性和延时稳定性,所以能够直接作为面向最终用户(End User)的产品(包括互联网产品和企业内部的分析产品)的后端系统。如淘宝数据魔方、淘宝指数、快的打车、阿里妈妈达摩盘(DMP)、淘宝美食频道等拥有数十万至上千万最终用户的互联网业务系统中, 都使用了 ADS。

 

ADS作为海量数据下的实时计算系统,给使用者带来极速自由的大数据OLAP分析体验以及极好的兼容性,期待和各位一起加速数据业务转型。

 

目前ADS已在阿里云上正式开始公测,我们欢迎有各类相关需求的用户使用ADS并向我们提出宝贵的建议。

 

ADS公测地址: https://i.aliyun.com/inviteapply?spm=0.0.0.0.42oHFX&agent_id=95

相关实践学习
基于MaxCompute的热门话题分析
本实验围绕社交用户发布的文章做了详尽的分析,通过分析能得到用户群体年龄分布,性别分布,地理位置分布,以及热门话题的热度。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
相关文章
|
1天前
|
JavaScript 小程序 Java
党务政务服务热线|基于SSM的党务政务服务热线平台(源码+数据库+文档)
党务政务服务热线|基于SSM的党务政务服务热线平台(源码+数据库+文档)
12 0
|
1天前
|
JavaScript Java 关系型数据库
社区养老服务|基于Springboot+vue的社区养老服务平台设计与实现(源码+数据库+文档)
社区养老服务|基于Springboot+vue的社区养老服务平台设计与实现(源码+数据库+文档)
5 0
|
1天前
|
JavaScript 小程序 Java
小区服务|基于SprinBoot+vue的小区服务管理系统(源码+数据库+文档)
小区服务|基于SprinBoot+vue的小区服务管理系统(源码+数据库+文档)
5 0
|
1天前
|
小程序 JavaScript Java
社区服务|基于SSM的智能社区服务小程序的系统设计与实现(源码+数据库+文档)
社区服务|基于SSM的智能社区服务小程序的系统设计与实现(源码+数据库+文档)
8 0
|
2天前
|
安全 JavaScript Java
私房菜|私房菜定制上门服务系统|基于springboot+vue私房菜定制上门服务系统设计与实现(源码+数据库+文档)
私房菜|私房菜定制上门服务系统|基于springboot+vue私房菜定制上门服务系统设计与实现(源码+数据库+文档)
9 0
|
2天前
|
监控 JavaScript 小程序
社区养老|社区养老服务系统|基于springboot社区养老服务系统设计与实现(源码+数据库+文档)
社区养老|社区养老服务系统|基于springboot社区养老服务系统设计与实现(源码+数据库+文档)
6 0
|
2天前
|
存储 算法 搜索推荐
【大数据分析与挖掘技术】Mahout推荐算法
【大数据分析与挖掘技术】Mahout推荐算法
9 0
|
2天前
|
机器学习/深度学习 算法 数据挖掘
【大数据分析与挖掘技术】概述
【大数据分析与挖掘技术】概述
7 1
|
2天前
|
Cloud Native 数据管理 关系型数据库
【阿里云云原生专栏】云原生数据管理:阿里云数据库服务的分布式实践
【5月更文挑战第21天】阿里云数据库服务在云原生时代展现优势,应对分布式数据管理挑战。PolarDB等服务保证高可用和弹性,通过多副本机制和分布式事务确保数据一致性和可靠性。示例代码展示了在阿里云数据库上进行分布式事务操作。此外,丰富的监控工具协助用户管理数据库性能,支持企业的数字化转型和业务增长。
161 1
|
2天前
|
存储 NoSQL 分布式数据库
大数据存储技术(4)—— NoSQL数据库
大数据存储技术(4)—— NoSQL数据库
17 1