基于阿里云数加平台的大数据Serverless实践

简介: 本文PPT来自班输于10月16日在2016年杭州云栖大会上发表的《基于阿里云数加平台的大数据Serverless实践》。

本文PPT来自班输于10月16日在2016年杭州云栖大会上发表的《基于阿里云数加平台的大数据Serverless实践》。

数加是阿里云大数据的品牌名,其旗下包含一系列的大数据产品及服务,可以为用户提供一站式的数据开发、分析、应用平台。数加提供的服务包括智能语音/图象/视频分析服务、企业级数据仓库服务,地理信息可视化服务,风险预警与管控服务等等。其在基础平台的大数据产品包括数据开发、机器学习、大数据计算、分析型数据库、流计算,在数据应用层的产品包括数据可视化DataV、推荐引擎、人脸识别等等。

面对大数据应用通常表现出的流程长、业务逻辑复杂,场景多样化、不确定性强,技术门槛高等问题,如何把数据科学家从基础设施运维的复杂性中解放出来成为了一个挑战。数加平台给出的答案是Serverless架构。这里采用Serverless架构的一个产品典范是 MaxCompute。基于Serverless架构实现的MaxCompute是一个服务化的架构,它由接入层、逻辑层和储存计算层三层组成,提供的事大数据计算的能力,而不是计算的工具或者环境。数加的典型应用场景还包括:1. 物联网大数据应用 2. 预测即服务 3.个性化推荐等。在个性化推荐中,用户只需要添加资源、添加业务配置数据、配置推荐场景算法、API对接、查看效果报表这五个步骤即可轻松实现个性化推荐,并且系统还提供可视化编辑算法、支持同一个推荐位同时测试多种推荐算法以及多种算法模版供客户选择。

300686df4e55a3547315badc3ba4eba96a158916

abad140334aee6966a9e11da8fa7e4f28b6bab68

a24e16a6d57e702388318385899ce62eca788b80

297ef90d65db8079c850d0201aef07dfa81ea3be

83bd4139c8787cd1db5fd89401808adbeeab3731

a9d7b5e933dbfc61b7bb77057daa8dc3e2d34a05

04274bbfc1387aeab513b3b399d130bbda581b2f

87b6aee8650b75c4c79ef7a99e55c3fbafad0180

beaca73704d58a02ca83eb2144c69681004abf98

d845a29354534ea71951248fa062b9ef703cabf0

db9512693a6c53105d457ff3a7ab0620b5ccbb00

87b6aee8650b75c4c79ef7a99e55c3fbafad0180

beaca73704d58a02ca83eb2144c69681004abf98

d845a29354534ea71951248fa062b9ef703cabf0

db9512693a6c53105d457ff3a7ab0620b5ccbb00

8c1f836da3b7a4d6241d8edf9bbe0cad39ed60af


欢迎加入MaxCompute钉钉群讨论

35a12d1cfb9f44bb6eead5bf43e9e0ca60393eff

相关实践学习
基于MaxCompute的热门话题分析
Apsara Clouder大数据专项技能认证配套课程:基于MaxCompute的热门话题分析
相关文章
|
6月前
|
数据可视化 关系型数据库 MySQL
基于python大数据的的海洋气象数据可视化平台
针对海洋气象数据量大、维度多的挑战,设计基于ECharts的可视化平台,结合Python、Django与MySQL,实现数据高效展示与交互分析,提升科研与决策效率。
|
8月前
|
存储 数据采集 搜索推荐
Java 大视界 -- Java 大数据在智慧文旅旅游景区游客情感分析与服务改进中的应用实践(226)
本篇文章探讨了 Java 大数据在智慧文旅景区中的创新应用,重点分析了如何通过数据采集、情感分析与可视化等技术,挖掘游客情感需求,进而优化景区服务。文章结合实际案例,展示了 Java 在数据处理与智能推荐等方面的强大能力,为文旅行业的智慧化升级提供了可行路径。
Java 大视界 -- Java 大数据在智慧文旅旅游景区游客情感分析与服务改进中的应用实践(226)
|
8月前
|
数据采集 SQL 搜索推荐
大数据之路:阿里巴巴大数据实践——OneData数据中台体系
OneData是阿里巴巴内部实现数据整合与管理的方法体系与工具,旨在解决指标混乱、数据孤岛等问题。通过规范定义、模型设计与工具平台三层架构,实现数据标准化与高效开发,提升数据质量与应用效率。
2489 0
大数据之路:阿里巴巴大数据实践——OneData数据中台体系
|
8月前
|
存储 SQL 分布式计算
大数据之路:阿里巴巴大数据实践——元数据与计算管理
本内容系统讲解了大数据体系中的元数据管理与计算优化。元数据部分涵盖技术、业务与管理元数据的分类及平台工具,并介绍血缘捕获、智能推荐与冷热分级等技术创新。元数据应用于数据标签、门户管理与建模分析。计算管理方面,深入探讨资源调度失衡、数据倾斜、小文件及长尾任务等问题,提出HBO与CBO优化策略及任务治理方案,全面提升资源利用率与任务执行效率。
620 0
|
9月前
|
存储 分布式计算 大数据
【赵渝强老师】阿里云大数据存储计算服务:MaxCompute
阿里云MaxCompute是快速、全托管的TB/PB级数据仓库解决方案,提供海量数据存储与计算服务。支持多种计算模型,适用于大规模离线数据分析,具备高安全性、低成本、易用性强等特点,助力企业高效处理大数据。
433 0
|
6月前
|
人工智能 Cloud Native 算法
拔俗云原生 AI 临床大数据平台:赋能医学科研的开发者实践
AI临床大数据科研平台依托阿里云、腾讯云,打通医疗数据孤岛,提供从数据治理到模型落地的全链路支持。通过联邦学习、弹性算力与安全合规技术,实现跨机构协作与高效训练,助力开发者提升科研效率,推动医学AI创新落地。(238字)
419 7
|
6月前
|
传感器 人工智能 监控
拔俗多模态跨尺度大数据AI分析平台:让复杂数据“开口说话”的智能引擎
在数字化时代,多模态跨尺度大数据AI分析平台应运而生,打破数据孤岛,融合图像、文本、视频等多源信息,贯通微观与宏观尺度,实现智能诊断、预测与决策,广泛应用于医疗、制造、金融等领域,推动AI从“看懂”到“会思考”的跃迁。
531 0
|
7月前
|
人工智能 分布式计算 DataWorks
阿里云大数据AI产品月刊-2025年8月
阿里云大数据& AI 产品技术月刊【2025年 8 月】,涵盖 8 月技术速递、产品和功能发布、市场和客户应用实践等内容,帮助您快速了解阿里云大数据& AI 方面最新动态。
531 2
|
7月前
|
存储 分布式计算 资源调度
【赵渝强老师】阿里云大数据MaxCompute的体系架构
阿里云MaxCompute是快速、全托管的EB级数据仓库解决方案,适用于离线计算场景。它由计算与存储层、逻辑层、接入层和客户端四部分组成,支持多种计算任务的统一调度与管理。
608 1

相关产品

  • 函数计算