阿里云开发者大会-大数据与AI-解读

本文涉及的产品
云原生大数据计算服务 MaxCompute,5000CU*H 100GB 3个月
云原生大数据计算服务MaxCompute,500CU*H 100GB 3个月
简介: 今天非常荣幸观看了2021阿里云开发者大会的直播。会上由诸多阿里云的顶级技术大咖带来目前最新技术的发展趋势;因为AI的软件开发架构caffe和tensorflow,所熟知贾扬清老师,所有主要听了一下他的‘云上大数据与AI开发范式的演进’。半个多小时的介绍中,贾扬清老师主要从一个开发者的角度描述了阿里云大数据和AI的相关最新技术;首先是通过两个故事分别介绍了数据和AI的最新技术;

今天非常荣幸观看了2021阿里云开发者大会的直播。会上由诸多阿里云的顶级技术大咖带来目前最新技术的发展趋势;因为AI的软件开发架构caffe和tensorflow,所熟知贾扬清老师,所有主要听了一下他的‘云上大数据与AI开发范式的演进’。半个多小时的介绍中,贾扬清老师主要从一个开发者的角度描述了阿里云大数据和AI的相关最新技术;首先是通过两个故事分别介绍了数据和AI的最新技术;在数据方面, 通常分为开发、分析、治理和应用四个部分,这个又被认为是以资源为主的数据,而目前的趋势逐渐变为以需求为主的数据服务,早在12年前,阿里云还未出现时,就有一款‘在云端’的产品平台发挥着类似的作用,多年来服务近8万用户,目前它的名字为Dataworks。而在开发者大会上介绍它,架构体系下的mapreduce和flink都免费提供开发者试用。总的来说,阿里云数据服务的目标就是帮助客户管得住、用得上、用得好。
第二个故事是关于AI的,从最早的原始算法程序设计阶段,到目前的caffe,tensorflow,pytorch普及,目前AI还没有统一的标准的范式可用;以往从想要写一行代码到实现一行可运行的代码,通常我们会采购一颗GPU,然后按照tensorflow,pytourch等各种软件。而使用云原生的DSW,可以不到一分钟的时间;而云原生+EAS的组合实现性能调优和自动测试在目前也可以算是不是范式的范式了;
后面贾扬清老师又举了个例子,阿里云和清华合作开发的中文多模态模型,可以实现通过中文输入构造出目前还没有的事物,比如‘有破洞的牛仔裤’。而这个模型的打造和运行,
全程没有购买一台机器,完全是借助已有的集群,利用平台的能力,潮汐的能力以及原生的方式制作。
这个例子体现了目前的AI工程化,也就是PAI平台产品的价值实现,PAI平台的四个组成部分EAS,STUDIO,DSW,DLC,可以分别对于工程化分解后的三组类别信息:
数据和算力云原生的规模化---EAS;
调度编程规模化---STUDIO,DSW;
开发服务标准化---DLC;
并且在下午的分论坛,三楼有相关的DSW展示;
最后将数据+AI相融合,才能实现从小作坊到大平台的敏捷制造价值;除去枯燥的架构,贾扬清老师又引用了木兰辞和互联网的黑话,让大家更方便理解这个架构:
木兰辞:东市买骏马,西市买鞍鞯,南市买辔头,北市买长鞭。
互联网黑话:用模块化和标准化的组件迅速产生战斗力解决业务问题
简单的理解就是让专业的人做专业事情,避免重复造轮子;

最后,作为大数据和AI开发者团队的代表, 他提出了本次开发者大会后期将会为开发者提供的五个字:读、学、练、用、赛。
读就是为开发者提供相关电子书;学就是提供给开发者学习中心课程;练就是提供大数据&AI的相关训练营;用就是开发者可以免费试用开发者版;赛就是后续会举办一些类似ACM和topcoder的编程比赛;
本次开发者大会收获颇丰,希望阿里云会为开发者在云上提供更高的价值,加油!

线上观看的体验效果不错,非常便利,视频流程,很少卡顿;
本人阿里云MVP 主要专注于物联网、大数据和AI。

相关实践学习
基于MaxCompute的热门话题分析
本实验围绕社交用户发布的文章做了详尽的分析,通过分析能得到用户群体年龄分布,性别分布,地理位置分布,以及热门话题的热度。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
目录
相关文章
|
17天前
|
人工智能 JSON API
阿里云文档智能 & RAG解决方案:提升AI大模型业务理解与应用
阿里云推出的文档智能 & RAG解决方案,旨在通过先进的文档解析技术和检索增强生成(RAG)方法,显著提升人工智能大模型在业务场景中的应用效果。该方案通过文档智能(Document Mind)技术将非结构化文档内容转换为结构化数据,提取文档的层级树、样式和版面信息,并输出为Markdown和Json格式,为RAG提供语义分块策略。这一过程不仅解决了文档内容解析错误和切块丢失语义信息的问题,还优化了输出LLM友好的Markdown信息。方案的优势在于其多格式支持能力,能够处理包括Office文档、PDF、Html、图片在内的主流文件类型,返回文档的样式、版面信息和层级树结构。
75 2
|
17天前
|
人工智能 Cloud Native 数据管理
媒体声音|重磅升级,阿里云发布首个“Data+AI”驱动的一站式多模数据平台
在2024云栖大会上,阿里云瑶池数据库发布了首个一站式多模数据管理平台DMS:OneMeta+OneOps。该平台由Data+AI驱动,兼容40余种数据源,实现跨云数据库、数据仓库、数据湖的统一数据治理,帮助用户高效提取和分析元数据,提升业务决策效率10倍。DMS已服务超10万企业客户,降低数据管理成本高达90%。
|
17天前
|
存储 人工智能 调度
阿里云吴结生:高性能计算持续创新,响应数据+AI时代的多元化负载需求
在数字化转型的大潮中,每家公司都在积极探索如何利用数据驱动业务增长,而AI技术的快速发展更是加速了这一进程。
|
12天前
|
人工智能 架构师
活动火热报名中|阿里云&Elastic:AI Search Tech Day
2024年11月22日,阿里云与Elastic联合举办“AI Search Tech Day”技术思享会活动。
159 2
|
13天前
|
存储 人工智能 分布式计算
大数据& AI 产品月刊【2024年10月】
大数据& AI 产品技术月刊【2024年10月】,涵盖本月技术速递、产品和功能发布、市场和客户应用实践等内容,帮助您快速了解阿里云大数据& AI 方面最新动态。
|
12天前
|
存储 人工智能 大数据
阿里云吴结生:高性能计算持续创新,响应数据+AI时代的多元化负载需求
在数字化转型的大潮中,每家公司都在积极探索如何利用数据驱动业务增长,而AI技术的快速发展更是加速了这一进程。
|
16天前
|
人工智能 Kubernetes 云计算
第五届CID大会成功举办,阿里云基础设施加速AI智能产业发展!
2024年10月19日,第五届中国云计算基础架构开发者大会(CID)在北京朗丽兹西山花园酒店成功举办。本次大会汇聚了来自云计算领域的众多精英,不同背景的与会者齐聚一堂,共同探讨云计算技术的最新发展与未来趋势。
|
16天前
|
人工智能 Kubernetes 云计算
第五届CID大会成功举办,阿里云基础设施加速AI智能产业发展!
第五届中国云计算基础架构开发者大会(CID)于2024年10月19日在北京成功举办。大会汇聚了300多位现场参会者和超过3万名在线观众,30余位技术专家进行了精彩分享,涵盖高效部署大模型推理、Knative加速AI应用Serverless化、AMD平台PMU虚拟化技术实践、Kubernetes中全链路GPU高效管理等前沿话题。阿里云的讲师团队通过专业解读,为与会者带来了全新的视野和启发,推动了云计算技术的创新发展。
|
17天前
|
机器学习/深度学习 人工智能 弹性计算
阿里云AI服务器价格表_GPU服务器租赁费用_AI人工智能高性能计算推理
阿里云AI服务器提供多种配置选项,包括CPU+GPU、CPU+FPGA等组合,支持高性能计算需求。本文汇总了阿里云GPU服务器的价格信息,涵盖NVIDIA A10、V100、T4、P4、P100等多款GPU卡,适用于人工智能、机器学习和深度学习等场景。详细价格表和实例规格见文内图表。
|
人工智能 大数据 Apache
大数据&AI的16种可能,2020阿里云客户最佳实践合集下载
2020年9月18日下午13:00云栖大会正式发布 《大数据&AI的16种可能,2020阿里云客户最佳实践合集》
72853 4
大数据&AI的16种可能,2020阿里云客户最佳实践合集下载