基于阿里云数加平台的大数据Serverless实践

本文涉及的产品
Serverless 应用引擎免费试用套餐包,4320000 CU,有效期3个月
函数计算FC,每月15万CU 3个月
简介: 本文PPT来自班输于10月16日在2016年杭州云栖大会上发表的《基于阿里云数加平台的大数据Serverless实践》。

本文PPT来自班输于10月16日在2016年杭州云栖大会上发表的《基于阿里云数加平台的大数据Serverless实践》。

数加是阿里云大数据的品牌名,其旗下包含一系列的大数据产品及服务,可以为用户提供一站式的数据开发、分析、应用平台。数加提供的服务包括智能语音/图象/视频分析服务、企业级数据仓库服务,地理信息可视化服务,风险预警与管控服务等等。其在基础平台的大数据产品包括数据开发、机器学习、大数据计算、分析型数据库、流计算,在数据应用层的产品包括数据可视化DataV、推荐引擎、人脸识别等等。

面对大数据应用通常表现出的流程长、业务逻辑复杂,场景多样化、不确定性强,技术门槛高等问题,如何把数据科学家从基础设施运维的复杂性中解放出来成为了一个挑战。数加平台给出的答案是Serverless架构。这里采用Serverless架构的一个产品典范是 MaxCompute。基于Serverless架构实现的MaxCompute是一个服务化的架构,它由接入层、逻辑层和储存计算层三层组成,提供的事大数据计算的能力,而不是计算的工具或者环境。数加的典型应用场景还包括:1. 物联网大数据应用 2. 预测即服务 3.个性化推荐等。在个性化推荐中,用户只需要添加资源、添加业务配置数据、配置推荐场景算法、API对接、查看效果报表这五个步骤即可轻松实现个性化推荐,并且系统还提供可视化编辑算法、支持同一个推荐位同时测试多种推荐算法以及多种算法模版供客户选择。

300686df4e55a3547315badc3ba4eba96a158916

abad140334aee6966a9e11da8fa7e4f28b6bab68

a24e16a6d57e702388318385899ce62eca788b80

297ef90d65db8079c850d0201aef07dfa81ea3be

83bd4139c8787cd1db5fd89401808adbeeab3731

a9d7b5e933dbfc61b7bb77057daa8dc3e2d34a05

04274bbfc1387aeab513b3b399d130bbda581b2f

87b6aee8650b75c4c79ef7a99e55c3fbafad0180

beaca73704d58a02ca83eb2144c69681004abf98

d845a29354534ea71951248fa062b9ef703cabf0

db9512693a6c53105d457ff3a7ab0620b5ccbb00

87b6aee8650b75c4c79ef7a99e55c3fbafad0180

beaca73704d58a02ca83eb2144c69681004abf98

d845a29354534ea71951248fa062b9ef703cabf0

db9512693a6c53105d457ff3a7ab0620b5ccbb00

8c1f836da3b7a4d6241d8edf9bbe0cad39ed60af


欢迎加入MaxCompute钉钉群讨论

35a12d1cfb9f44bb6eead5bf43e9e0ca60393eff

相关实践学习
基于Hologres轻松玩转一站式实时仓库
本场景介绍如何利用阿里云MaxCompute、实时计算Flink和交互式分析服务Hologres开发离线、实时数据融合分析的数据大屏应用。
基于MaxCompute的热门话题分析
Apsara Clouder大数据专项技能认证配套课程:基于MaxCompute的热门话题分析
相关文章
|
2月前
|
数据采集 人工智能 大数据
10倍处理效率提升!阿里云大数据AI平台发布智能驾驶数据预处理解决方案
阿里云大数据AI平台推出智能驾驶数据预处理解决方案,助力车企构建高效稳定的数据处理流程。相比自建方案,数据包处理效率提升10倍以上,推理任务提速超1倍,产能翻番,显著提高自动驾驶模型产出效率。该方案已服务80%以上中国车企,支持多模态数据处理与百万级任务调度,全面赋能智驾技术落地。
164 0
|
2月前
|
人工智能 弹性计算 运维
亚太唯一!阿里云Serverless计算产品进入Forrester领导者象限
近日,Forrester发布《Serverless Development Platforms, Q2 2025》报告,阿里云函数计算FC与Serverless应用引擎SAE在21项评测中斩获9项最高分,成为国内唯一进入领导者象限的科技公司。
|
2月前
|
分布式计算 算法 大数据
大数据时代的智能研发平台需求与阿里云DIDE的定位
阿里云DIDE是一站式智能大数据开发与治理平台,致力于解决传统大数据开发中的效率低、协同难等问题。通过全面整合资源、高度抽象化设计及流程自动化,DIDE显著提升数据处理效率,降低使用门槛,适用于多行业、多场景的数据开发需求,助力企业实现数字化转型与智能化升级。
73 1
|
3月前
|
人工智能 分布式计算 DataWorks
一体系数据平台的进化:基于阿里云 EMR Serverless Spark 的持续演进
本文介绍了一体系汽配供应链平台如何借助阿里云EMR Serverless Spark实现从传统Hadoop平台向云原生架构的迁移。通过融合高质量零部件供应与创新互联网科技,一体系利用EMR Serverless Spark和DataWorks构建高效数据分析体系,解决大规模数据处理瓶颈。方案涵盖实时数据集成、Lakehouse搭建、数仓分层设计及BI/ML应用支持,显著提升数据处理性能与业务响应速度,降低运维成本,为数字化转型奠定基础。最终实现研发效率提升、运维压力减轻,并推动AI技术深度整合,迈向智能化云原生数据平台。
138 4
|
3月前
|
人工智能 弹性计算 运维
亚太唯一,阿里云Serverless计算产品进入Forrester领导者象限
Forrester发布Serverless开发平台评估报告《Forrester Wave™: Serverless Development Platforms, Q2 2025》:在21项测评中,阿里云函数计算FC和Serverless应用引擎SAE的产品能力拿到了9项最高分。阿里云成功进入领导者象限,是国内唯一进入该象限的科技公司。
|
3月前
|
分布式计算 运维 监控
Fusion 引擎赋能:流利说如何用阿里云 Serverless Spark 实现数仓计算加速
本文介绍了流利说与阿里云合作,利用EMR Serverless Spark优化数据处理的全过程。流利说是科技驱动的教育公司,通过AI技术提升用户英语水平。原有架构存在资源管理、成本和性能等痛点,采用EMR Serverless Spark后,实现弹性资源管理、按需计费及性能优化。方案涵盖数据采集、存储、计算到查询的完整能力,支持多种接入方式与高效调度。迁移后任务耗时减少40%,失败率降低80%,成本下降30%。未来将深化合作,探索更多行业解决方案。
157 1
|
4月前
|
人工智能 弹性计算 运维
阿里云邀请您参加 2025 中国 Serverless 用户调查
阿里云邀请您参加 2025 中国 Serverless 用户调查
|
运维 Cloud Native 关系型数据库
活动回顾|阿里云 Serverless 技术实战与创新成都站回放&PPT下载
7月29日“阿里云 Serverless 技术实战与创新”成都站圆满落幕。可免费下载成都站|阿里云 Serverless 沙龙演讲 PPT。
|
人工智能 弹性计算 运维
阿里云宣布 Serverless 应用引擎 SAE2.0 将公测上线,多款产品全新升级
阿里云宣布 Serverless 应用引擎 SAE2.0 将公测上线,多款产品全新升级
70528 53

相关产品

  • 函数计算