首批!阿里云MaxCompute完成中国信通院基于无服务器架构大数据平台测试

简介: 近日,阿里云计算有限公司MaxCompute产品顺利完成中国信通院首批无服务器架构(Serverless)大数据平台测试。

随着数字经济的蓬勃发展及各行业数字化转型的不断推进,算力价值正持续提升。在单纯提升芯片算力面临越来越大挑战的情况下,无服务(Serverless)架构作为一种灵活轻量化的新型算力架构,凭借其无需人工参与资源分配、按量计费及更细粒度的弹性伸缩等特点,已经成为大数据平台挖掘算力潜力、提升算力效率的重要手段。


近日,阿里云计算有限公司MaxCompute产品顺利完成中国信通院首批无服务器架构(Serverless)大数据平台测试。测试过程依据标准在资源调度、数据应用、应用管理三大能力域的相关要求,测试结果表明,MaxCompute产品在资源管理、资源弹性、编排调度、数据管理、存储服务、应用调度、安全管理、免运维等方面均符合标准要求。

《基于无服务器(Serverless)架构的大数据平台技术要求》是中国信通院云计算与大数据研究所依托中国通信标准化协会大数据技术标准推进委员会(CCSA TC601),联合大数据产业甲方用户与头部企业参与编制的技术标准,阿里云为核心参编单位之一。其包含资源调度、数据应用、应用管理三大能力域共33个测试项,其中分为26个必选项和7个可选项。作为业内首个基于无服务器(Serverless)架构的大数据平台技术标准,可为无服务器架构大数据平台的研发、测试以及选型提供参考。

1.png

《基于无服务器(Serverless)架构的大数据平台技术要求》标准框架图

阿里云MaxCompute产品介绍

2.png

MaxCompute是一款多功能、低成本、高性能、高可靠、易于使用的数据仓库和支持数据湖能力的大数据平台。支持超大规模、serverless和完善的多租户能力,内建企业级安全能力和管理功能,支持数据保护和安全共享,数据/生态开放,可以满足数据仓库/BI、结构化数据处理和分析、湖仓一体联邦计算、机器学习等多业务场景需求,也在非结构化数据处理和AI与大数据结合场景上不断构建新能力。

产品优势

  • Serverless
  • 公共云用户不感知部署升级、不需要技术运维。功能持续交付,向前兼容,功能演进不影响用户业务逻辑
  • 除支持根据预估资源预付费方式,还支持按用户业务和实际使用资源的按量付费模式
  • 可用资源高弹性,用户不用担心资源不足或资源浪费,还可以选择多种更经济的降本增效的资源使用方式
  • 高性能低成本
  • 多年双十一锤炼,以稳定的资源数量和成本承载了每年持续的业务、数据和计算任务的高增长
  • 连续 6 年刷新TPC-BB大数据性能测试的性能和性价比世界记录
  • 弹性CU、闲时版资源、分层存储等新能力帮用户进一步降低计算存储成本
  • 稳定性
  • 阿里集团自用大数据平台的最佳实践,上线功能经过内部生产验证
  • 99.9%服务可用性SLA保证
  • 安全性
  • 通过多租隔离机制保证用户的权限、资源和运行环境安全隔离
  • 基础设施层面支持私有化部署、网络隔离和安全管控、存储传输加密、支持容灾
  • 引擎层面支持身份认证、精细化权限控制、资源隔离、备份恢复、进程沙箱隔离
  • 工具层面支持审计、审批、数据脱敏等治理、管理能力
  • 多引擎多场景和持续演进的新能力
  • 湖仓一体兼容用户数据湖联邦计算,兼容多种存储介质和数据格式
  • 新推出Transactional Table 2.0 对标开源Hudi的数据近实时计算和管理能力
  • 支持和实时数仓Hologres无缝直读,加强数仓OLAP分析能力
  • 新推出物化视图、BloomFilter索引等优化查询性能的新能力
  • 通过MaxStorage API和Connector将MaxCompute数据向用户的开源引擎开放
  • 新推出Notebook和MaxFrame等Python生态的科学计算能力,更好的使用数仓资源和数据

相关实践学习
简单用户画像分析
本场景主要介绍基于海量日志数据进行简单用户画像分析为背景,如何通过使用DataWorks完成数据采集 、加工数据、配置数据质量监控和数据可视化展现等任务。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
目录
相关文章
|
13天前
|
存储 分布式计算 Hadoop
大数据处理架构Hadoop
【4月更文挑战第10天】Hadoop是开源的分布式计算框架,核心包括MapReduce和HDFS,用于海量数据的存储和计算。具备高可靠性、高扩展性、高效率和低成本优势,但存在低延迟访问、小文件存储和多用户写入等问题。运行模式有单机、伪分布式和分布式。NameNode管理文件系统,DataNode存储数据并处理请求。Hadoop为大数据处理提供高效可靠的解决方案。
36 2
|
19天前
|
弹性计算
阿里云ECS使用体验
在申请高校学生免费体验阿里云ECS云服务器后的一些使用体验和感受。
|
29天前
|
存储 城市大脑 运维
中国信通院&沙利文最新报告:阿里云混合云全面领先
中国信息通信研究院与国际权威分析机构沙利文(Frost & Sullivan)联合发布《2023 混合云价值影响力矩阵》,报告显示,阿里云是唯一一家全域领导者,在技术表现域、战略布局域以及市场表现域三个维度均排名领先于97%的企业。
|
1天前
|
弹性计算
阿里云ECS的使用心得
本文主要讲述了我是如何了解到ECS,使用ECS的一些经验,以及自己的感悟心得
|
9天前
|
弹性计算 运维 安全
阿里云ecs使用体验
整了台服务器部署项目上线
|
12天前
|
弹性计算 应用服务中间件 Linux
阿里云ECS服务器上从零开始搭建nginx服务器
阿里云ECS服务器上从零开始搭建nginx服务器
|
14天前
|
弹性计算 安全
电子好书发您分享《阿里云第八代企业级ECS实例,为企业提供更安全的云上防护》
阿里云第八代ECS实例,搭载第五代英特尔至强处理器与飞天+CIPU架构,提升企业云服务安全与算力。[阅读详情](https://developer.aliyun.com/ebook/8303/116162?spm=a2c6h.26392459.ebook-detail.5.76bf7e5al1Zn4U) ![image](https://ucc.alicdn.com/pic/developer-ecology/cok6a6su42rzm_f422f7cb775444bbbfc3e61ad86800c2.png)
35 14
|
17天前
|
弹性计算 前端开发 Java
使用阿里云 mqtt serverless 版本超低成本快速实现 webscoket 长链接服务器
使用阿里云 MQTT Serverless 可轻松实现弹性伸缩的 WebSocket 服务,每日成本低至几元。适用于小程序消息推送的 MQTT P2P 模式。前端需注意安全,避免 AK 泄露,采用一机一密方案。后端通过调用 `RegisterDeviceCredential` API 发送消息。示例代码包括 JavaScript 前端连接和 Java 后端发送。
165 0
|
22天前
|
弹性计算 关系型数据库 MySQL
阿里云数据库服务器价格表,数据库创建、连接和使用教程
阿里云数据库使用流程包括购买和管理。选择所需数据库类型如MySQL,完成实名认证后购买,配置CPU、内存和存储。确保数据库地域与ECS相同以允许内网连接。创建数据库和账号,设置权限。通过DMS登录数据库,使用账号密码连接。同一VPC内的ECS需添加至白名单以进行内网通信。参考官方文档进行详细操作。
125 3
|
22天前
|
机器学习/深度学习 分布式计算 数据挖掘
阿里云 MaxCompute MaxFrame 开启免费邀测,统一 Python 开发生态
阿里云 MaxCompute MaxFrame 正式开启邀测,统一 Python 开发生态,打破大数据及 AI 开发使用边界。
201 1

相关产品

  • 云原生大数据计算服务 MaxCompute