从大数据到ET大脑-阿里云的超智能AI平台

本文涉及的产品
云原生大数据计算服务 MaxCompute,5000CU*H 100GB 3个月
云原生大数据计算服务MaxCompute,500CU*H 100GB 3个月
简介: 首先声明本座并不是阿里粉丝,一直认为阿里的服务框架Dubbo跟Netflix的Spring Cloud相比,无论从社区成熟度还是功能组件上相比都差了一大截。 但就在刚刚过去的618年中大促中,阿里硬是将这个京东成立日变成了自己在上半年的购物狂欢节。

首先声明本座并不是阿里粉丝,一直认为阿里的服务框架Dubbo跟Netflix的Spring Cloud相比,无论从社区成熟度还是功能组件上相比都差了一大截。
1
但就在刚刚过去的618年中大促中,阿里硬是将这个京东成立日变成了自己在上半年的购物狂欢节。这不禁让人唏嘘还有没有哪个零售商敢大张旗鼓地宣传购物节这个概念,这等于是在给阿里创造另一个大促时点。
2
作为一个做“集市”起家的电商,在其超过1000万的注册商户中绝大多数是中小企业,甚至没有店面。那在要准备618,双11这类大促时,很显见的问题就是备货不足,还没有实体资产找银行批补货贷款。他们只好找阿里,那阿里的蚂蚁金融就会根据这些商户在淘宝或天猫上的保证金、往期交易和流水来判断放贷风险,最终将可控的贷款额度发放给商户。因此阿里的销售奇迹很大一部分是依托于智能的风控体系有效地将大笔资金从左口袋(蚂蚁金融)移到了右口袋(天猫/淘宝)。
蚂蚁金融的贷款审批非常便捷,概括来讲是310模式,即申请人花3分钟填写贷款申请表;蚂蚁金融花1秒钟调用阿里大数据平台的风控模型判断额度能否通过;全程0人工干预。
3
根据阿里统计,平均每笔贷款的成本仅为2.3元人民币,最小审批金额为1元人民币,整体坏账率不到1%。以下是蚂蚁金融小微贷的流程图,最左边数据源可以是阿里的生态系统(包括支付宝、蚂蚁金融、电子商务),也可以是外部数据(B2B流水、CNZZ流量统计数据或其他外部数据),通过数据清理后进入数据汇聚层,也就是蚂蚁金融的数据集成平台,可同时并行超过一万的计算任务,日均处理超过20PB的数据,对接超过3000个数据源,超过5000个参数。
4
处理完成后进入模型计算,也就是蚂蚁金融的核心决策系统。针对不同场景,这里提供了超过100个AI数据模型来做风险控制以及运维管理,最后得出金融判断,包括贷款额度,信用评级等。
电商的一端是商家,另一端是买家,在给商家提供了贷款服务后,阿里是如何提升买家的用户体验的呢?同样靠的是AI,例如针对每一个用户偏好的界面定制,以及图像识别功能等。要知道在淘宝这一体量的电商平台,很多词条的搜索结果是远超通用搜索引擎,有时必须借助图像识别技术来准确定位商品,尤其对于本座这种表达能力缺失的买家更为重要。
5
阿里通过大量数据建立起来的模型算法,准确匹配到近似的图像,并将搜索结果返回给用户。
基于云计算、大数据及人工智能,阿里迅速建立起了自己的核心数据智能引擎ET大脑(Extreme Technology Brain),并在更广泛的应用领域进行测试,例如城市大脑。
6
杭州是第一个被试点的城市,因为它除了有阿里之外,还有各种高科技的视频监控厂商(如海康威视、浙江大华),试点内容包括:
交通感知与优化:交通线路的感知、交通灯信号的优化
事件侦测与响应:通过摄像头的图像感知获取异常事件、人流量预测与监控、特种车辆的绿色通道开辟
嫌疑车辆跟踪:触点式嫌疑车辆标记、嫌疑车辆跟踪
公共交通优化:公交线路行程优化。
通过上述优化,杭州交通在高峰时间的拥塞率降低了9.2%,乘客平均出行时间减少3分钟。
目前以杭州为试点,部署城市ET大脑的城市包括有吉隆坡、重庆、苏州以及澳门。
7

相关实践学习
基于MaxCompute的热门话题分析
本实验围绕社交用户发布的文章做了详尽的分析,通过分析能得到用户群体年龄分布,性别分布,地理位置分布,以及热门话题的热度。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
相关文章
智能化车辆信息管理:AI视频监控在大型商场的技术方案介绍
通过高效停车管理系统实现精准采集车牌号码和停车时长、关联消费数据、优化停车引导。解决方案包括智能车牌识别、实时车位引导及个性化服务,利用OCR、AI图像增强、传感器等技术,确保准确识别、减少寻找车位时间,并提供定制化优惠,提升购物体验。
鹰角基于 Flink + Paimon + Trino 构建湖仓一体化平台实践项目
本文整理自鹰角网络大数据开发工程师朱正军在Flink Forward Asia 2024上的分享,主要涵盖四个方面:鹰角数据平台架构、数据湖选型、湖仓一体建设及未来展望。文章详细介绍了鹰角如何构建基于Paimon的数据湖,解决了Hudi入湖的痛点,并通过Trino引擎和Ranger权限管理实现高效的数据查询与管控。此外,还探讨了湖仓一体平台的落地效果及未来技术发展方向,包括Trino与Paimon的集成增强、StarRocks的应用以及Paimon全面替换Hive的计划。
鹰角基于 Flink + Paimon + Trino 构建湖仓一体化平台实践项目
阿里云AI剧本生成与动画创作解决方案深度评测
阿里云AI剧本动画全链路解决方案基于函数计算FC、百炼大模型和ComfyUI技术架构,实现从剧本生成到动画渲染的自动化流程。方案在电商广告、知识科普等快速批产场景表现出色,大幅缩短创作时间(如30秒动画从9.5小时减至16.1分钟)。然而,在强剧情连续性和物理规则方面存在不足,建议结合人工审核优化。测试显示其商用级成熟度,推荐采用“AI初稿-人工润色”模式。
135 95
阿里云AI剧本生成与动画创作解决方案深度评测
AI性能极致体验:通过阿里云平台高效调用满血版DeepSeek-R1模型
DeepSeek是近期热门的开源大语言模型(LLM),以其强大的训练和推理能力备受关注。然而,随着用户需求的增长,其官网在高并发和大数据处理场景下常面临服务不稳定的问题。本文将深度测评通过阿里云平台调用满血版DeepSeek模型(671B),以充分发挥其性能和稳定性。阿里云提供高效、低延迟、大规模并发支持及稳定的云服务保障,并为用户提供100万免费token,简化操作流程,确保企业在AI应用上的高效性和成本效益。尽管如此,DeepSeek API目前不支持联网搜索和图片、文档分析功能,需结合其他工具实现。
818 13
Elasticsearch AI Assistant 集成 DeepSeek,1分钟搭建智能运维助手
Elasticsearch 新支持 DeepSeek 系列模型,使用 AI 助手,通过自然语言交互,为可观测性分析、安全运维管理及数据智能处理提供一站式解决方案。
142 2
Elasticsearch AI Assistant 集成 DeepSeek,1分钟搭建智能运维助手
阿里云携手DeepSeek,AI应用落地五折起!
近年来,人工智能技术飞速发展,越来越多的企业希望借助AI的力量实现数字化转型,提升效率和竞争力。然而,AI应用的开发和落地并非易事,企业往往面临着技术门槛高、成本投入大、落地效果难以保障等挑战。
33 1
数据无界、湖仓无界, Apache Doris 湖仓一体解决方案全面解读(上篇)
湖仓一体架构融合了数据湖的低成本、高扩展性,以及数据仓库的高性能、强数据治理能力,高效应对大数据时代的挑战。为助力企业实现湖仓一体的建设,Apache Doris 提出了数据无界和湖仓无界核心理念,并结合自身特性,助力企业加速从 0 到 1 构建湖仓体系,降低转型过程中的风险和成本。本文将对湖仓一体演进及 Apache Doris 湖仓一体方案进行介绍。
数据无界、湖仓无界, Apache Doris 湖仓一体解决方案全面解读(上篇)
大数据与云计算:无缝结合,开启数据新纪元
大数据与云计算:无缝结合,开启数据新纪元
42 11
玩转数据:初学者的大数据处理工具指南
玩转数据:初学者的大数据处理工具指南
74 14
数据的秘密:如何用大数据分析挖掘商业价值
数据的秘密:如何用大数据分析挖掘商业价值
48 9

热门文章

最新文章

AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等