首批!阿里云MaxCompute完成中国信通院基于无服务器架构大数据平台测试

本文涉及的产品
云原生大数据计算服务MaxCompute,500CU*H 100GB 3个月
云原生大数据计算服务 MaxCompute,5000CU*H 100GB 3个月
简介: 近日,阿里云计算有限公司MaxCompute产品顺利完成中国信通院首批无服务器架构(Serverless)大数据平台测试。

随着数字经济的蓬勃发展及各行业数字化转型的不断推进,算力价值正持续提升。在单纯提升芯片算力面临越来越大挑战的情况下,无服务(Serverless)架构作为一种灵活轻量化的新型算力架构,凭借其无需人工参与资源分配、按量计费及更细粒度的弹性伸缩等特点,已经成为大数据平台挖掘算力潜力、提升算力效率的重要手段。


近日,阿里云计算有限公司MaxCompute产品顺利完成中国信通院首批无服务器架构(Serverless)大数据平台测试。测试过程依据标准在资源调度、数据应用、应用管理三大能力域的相关要求,测试结果表明,MaxCompute产品在资源管理、资源弹性、编排调度、数据管理、存储服务、应用调度、安全管理、免运维等方面均符合标准要求。

《基于无服务器(Serverless)架构的大数据平台技术要求》是中国信通院云计算与大数据研究所依托中国通信标准化协会大数据技术标准推进委员会(CCSA TC601),联合大数据产业甲方用户与头部企业参与编制的技术标准,阿里云为核心参编单位之一。其包含资源调度、数据应用、应用管理三大能力域共33个测试项,其中分为26个必选项和7个可选项。作为业内首个基于无服务器(Serverless)架构的大数据平台技术标准,可为无服务器架构大数据平台的研发、测试以及选型提供参考。

1.png

《基于无服务器(Serverless)架构的大数据平台技术要求》标准框架图

阿里云MaxCompute产品介绍

2.png

MaxCompute是一款多功能、低成本、高性能、高可靠、易于使用的数据仓库和支持数据湖能力的大数据平台。支持超大规模、serverless和完善的多租户能力,内建企业级安全能力和管理功能,支持数据保护和安全共享,数据/生态开放,可以满足数据仓库/BI、结构化数据处理和分析、湖仓一体联邦计算、机器学习等多业务场景需求,也在非结构化数据处理和AI与大数据结合场景上不断构建新能力。

产品优势

  • Serverless
  • 公共云用户不感知部署升级、不需要技术运维。功能持续交付,向前兼容,功能演进不影响用户业务逻辑
  • 除支持根据预估资源预付费方式,还支持按用户业务和实际使用资源的按量付费模式
  • 可用资源高弹性,用户不用担心资源不足或资源浪费,还可以选择多种更经济的降本增效的资源使用方式
  • 高性能低成本
  • 多年双十一锤炼,以稳定的资源数量和成本承载了每年持续的业务、数据和计算任务的高增长
  • 连续 6 年刷新TPC-BB大数据性能测试的性能和性价比世界记录
  • 弹性CU、闲时版资源、分层存储等新能力帮用户进一步降低计算存储成本
  • 稳定性
  • 阿里集团自用大数据平台的最佳实践,上线功能经过内部生产验证
  • 99.9%服务可用性SLA保证
  • 安全性
  • 通过多租隔离机制保证用户的权限、资源和运行环境安全隔离
  • 基础设施层面支持私有化部署、网络隔离和安全管控、存储传输加密、支持容灾
  • 引擎层面支持身份认证、精细化权限控制、资源隔离、备份恢复、进程沙箱隔离
  • 工具层面支持审计、审批、数据脱敏等治理、管理能力
  • 多引擎多场景和持续演进的新能力
  • 湖仓一体兼容用户数据湖联邦计算,兼容多种存储介质和数据格式
  • 新推出Transactional Table 2.0 对标开源Hudi的数据近实时计算和管理能力
  • 支持和实时数仓Hologres无缝直读,加强数仓OLAP分析能力
  • 新推出物化视图、BloomFilter索引等优化查询性能的新能力
  • 通过MaxStorage API和Connector将MaxCompute数据向用户的开源引擎开放
  • 新推出Notebook和MaxFrame等Python生态的科学计算能力,更好的使用数仓资源和数据

相关实践学习
基于MaxCompute的热门话题分析
本实验围绕社交用户发布的文章做了详尽的分析,通过分析能得到用户群体年龄分布,性别分布,地理位置分布,以及热门话题的热度。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
目录
相关文章
|
1天前
|
存储 分布式计算 大数据
大数据架构管理规范
8月更文挑战第18天
8 2
|
3天前
|
存储 机器学习/深度学习 数据采集
深入解析大数据核心概念:数据平台、数据中台、数据湖与数据仓库的异同与应用
深入解析大数据核心概念:数据平台、数据中台、数据湖与数据仓库的异同与应用
|
6天前
|
消息中间件 存储 大数据
大数据-数据仓库-实时数仓架构分析
大数据-数据仓库-实时数仓架构分析
22 1
|
22天前
|
人工智能 自然语言处理 Cloud Native
阿里云 AI 原生应用架构开放日上线 CommunityOverCode Asia 2024
诚挚邀请您参加阿帕奇软件基金会亚洲大会——CommunityOverCode Asia 2024。本次活动将汇聚来自世界各地的开发者和科技爱好者,共同探索开源技术的最新进展和未来趋势。我们将在大会期间举办《阿里云 AI 原生应用架构开放日》,欢迎您来现场和我们交流。
271 11
|
13天前
|
运维 数据库 云计算
卓越架构,数据无忧|8月30日,阿里云用户组·上海站沙龙,火热报名中🔥
聚焦数据库 「成本&稳定」方面的技术实现和解決方案,深度互动数据库使用生命周期需求、如何节约数据库成本等
|
13天前
|
关系型数据库 Serverless 分布式数据库
阿里云 Serverless 高可用架构
阿里云的《卓越效能,极简运维,Serverless高可用架构》解决方案提供了全托管服务、自动扩展、高可用性、无缝集成以及内置安全等核心功能。该方案通过免除底层基础设施的管理,允许用户专注于应用程序开发,同时确保应用的稳定运行和资源的有效利用。 **核心功能简介**: - **全托管服务**:用户无需关心底层硬件,由阿里云负责维护和扩展计算资源。 - **自动扩展**:根据业务需求自动调整资源,确保应用在高峰期有足够的计算能力,低谷期则节省成本。 - **高可用性**:多地域和多可用区部署,实现故障自动切换,确保业务连续性。 - **无缝集成**:与阿里云的其他服务(如数据库、消息队列等)深度
|
1月前
|
存储 关系型数据库 数据库
给阿里云的建议和意见 一个云服务器架构是否可行
摘要(Markdown格式): 在修复阿里云服务器IPv4设置错误时遇到困难,导致服务器远程登录失败及外网访问受阻,耗时三天解决。建议阿里云更新文档,确保设置指导与实际情况一致,例如只需在路由表添加条目关联IPv4。此外,建议优化帮助页面,如采用折叠式设计减少干扰。服务器主要任务是数据分析、存储和分发,文中提出简化服务器框架,消除硬件软件复杂配置,利于初学者和独立开发者快速上手,降低时间成本。该设计旨在减少无用组件,节省资源,同时降低云服务商的人力和支持成本。期望云服务商考虑此类架构创新。目前未知是否有类似产品,期待业界反馈。
904 0
给阿里云的建议和意见 一个云服务器架构是否可行
|
21天前
|
运维 监控 关系型数据库
阿里云Serverless高可用架构深度评测:构建稳定高效应用的全面指南
随着云计算技术的迅猛发展,Serverless计算作为一种新兴的、以事件驱动的无服务器架构,正在逐渐改变企业构建、部署和管理应用程序的方式。阿里云,作为全球领先的云服务提供商之一,提供了全面的Serverless解决方案,包括PolarDB MySQL Serverless集群和Serverless应用引擎等产品,致力于帮助用户构建高可用、高弹性、低成本的应用系统。本文将深度评测阿里云的Serverless服务,从产品功能、使用体验、部署常见问题、文档与支持的全面性等维度出发,为开发者和企业提供实用的参考。
63 0
|
1天前
|
敏捷开发 测试技术 持续交付
阿里云云效产品使用合集之如何管理企业的组织架构
云效作为一款全面覆盖研发全生命周期管理的云端效能平台,致力于帮助企业实现高效协同、敏捷研发和持续交付。本合集收集整理了用户在使用云效过程中遇到的常见问题,问题涉及项目创建与管理、需求规划与迭代、代码托管与版本控制、自动化测试、持续集成与发布等方面。
|
1月前
|
分布式计算 大数据 Shell
MaxCompute产品使用合集之odps shell如何将ech变量的结果集合写入文件,并且指定服务器的位置
MaxCompute作为一款全面的大数据处理平台,广泛应用于各类大数据分析、数据挖掘、BI及机器学习场景。掌握其核心功能、熟练操作流程、遵循最佳实践,可以帮助用户高效、安全地管理和利用海量数据。以下是一个关于MaxCompute产品使用的合集,涵盖了其核心功能、应用场景、操作流程以及最佳实践等内容。
30 10

热门文章

最新文章

相关产品

  • 云原生大数据计算服务 MaxCompute