多领域,多角度!隐藏版阿里双11“黑科技”大公开

本文涉及的产品
云原生大数据计算服务 MaxCompute,5000CU*H 100GB 3个月
云原生大数据计算服务MaxCompute,500CU*H 100GB 3个月
简介: 8位阿里技术大神深度解读:前端极限挑战、网络自动化、在线AI推荐应用、超大规模Docker实战、 Buy+VR购物背后的快速交付、数字大屏的研发经验等。

12月6日-7日,由阿里巴巴集团、阿里巴巴技术发展部、阿里云云栖社区联合主办,以“2016双11技术创新”为主题的阿里巴巴技术论坛(Alibaba Technology Forum,ATF)将在线举办。立即报名

2016年双11是新零售的一个起点。交易额1207亿,成交额相比于去年增长32.32%(2015年的这一数字为912.17亿);开场30分钟,创造每秒交易峰值17.5万笔,每秒支付峰值12万笔的新纪录;菜鸟单日物流订单量超过6.57亿,创历史新高……马老师说:双11最大的挑战是不断扩展技术边界,去准备强大的技术解决人类尚未碰到的问题。每届双11对阿里来说都是一次大考,正是通过这样一次次的大考,阿里将双11所获得的技术和系统能力,变成普惠技术,让商家享受到,共同促进社会进步。 

8f32ddbbdfdd987a25a690feb03dbd9cc7b8b8cf

以“2016双11技术创新”为主题的阿里巴巴技术论坛,欢迎报名

这些独特的技术和系统能力是什么?12月6日-7日,20:00-22:00,阿里首届以“双11技术为创新”为主题的在线技术论坛将会揭开神秘的面纱。

为了更为全面解读2016双11背后的技术创新,我们特别邀请了亲历2016年双11的8位阿里技术大V:从承载亿级用户大流量的网络自动化技术,到资源充分利用的超大规模Docker化;从支撑最大规模在线交易的实时和离线计算能力,到人工智能在搜索和推荐场景下的创新应用;从颠覆购物体验的VR互动,到背后千人千面的商铺个性化;从应对前端极限挑战的“秒开项目”,到绚烂媒体大屏背后全面的数据架构。这些技术代表了阿里在技术领域最新创新成果,希望能够借论坛与更多技术伙伴深入讨论和互动。


12月6日,聚焦网络自动化,大规模计算,在线AI应用和VR

12月6日将分享四大主题:网络自动化技术、阿里大规模数据计算与处理平台、在线AI技术和阿里虚拟互动实验室的技术实践成果。

阿里巴巴研究员张铭:阿里双11背后的网络自动化技术

511f04456bae95fd00be4b5a5afc4b512b72c096

讲师简介:张铭,阿里巴巴研究员,负责阿里巴巴网络自动化系统和工具的研发。他拥有16项美国专利,并在国际知名的会议和刊物上表过多篇极具影响力的论文。他还受邀在国际顶级的网络学术会议上(例如ACM SIGCOMM) 担任评委。

演讲议题:每年的双11对阿里的网络都是一次严峻的考验。在双11当天,阿里的网络必须承载来自于世界各地数以亿计的用户所带来的巨大流量。而在这期间,任何一个看起来微小的故障或者失误都有可能给阿里的客户带来难以估量的损失。为了保证网络能够稳定可靠的度过双11,我们必须在双11之前就计划并且做好大量的准备工作,这包括1)对整个网络进行多维度多批次的检查,将绝大部分的隐患和风险提前进行修复,减小故障可能发生的机率;2)对双11活动期间任何可能出现的故障,提前设计并且演练好预案,以保证即便故障发生也能够做到快速的处理和恢复,减小故障对客户的影响。在这次演讲中,我们将会介绍阿里网络团队所打造的一系列网络自动化工具,正是这些工具让我们能够完成这些细致而又繁重的准备工作,让阿里的网络可以轻松应对双11的挑战。


阿里巴巴资深技术专家林伟:阿里大规模数据计算与处理平台

625643270b3e747d2e092be8d4c9b39d8cc15705

讲师简介:林伟,阿里巴巴大数据事业部资深架构师,原微软Cosmos/Scope核心开发人员, 现负责阿里巴巴大数据计算平台总体架构,该平台是阿里巴巴核心计算分析平台,承担阿里内部绝大数计算任务。林伟作为一名分布式系统研究员,在国外一流会议OSDI, SIGMOD, NSDI, VLDB发表多篇论文。是大数据存储,分布式计算,数据查询优化,分布式调度等领域的专家。具有10多年研究和开发经历,分别打造微软和阿里内部大型数万台级别数据中心的计算平台。

演讲议题:双11对阿里云大数据平台的技术挑战主要体现在两方面。实时数据处理技术方面,包括日志数据和交易数据的实时采集、分发、计算,最终在媒体直播大屏上实时渲染和展示,整个链路的稳定性保障压力是巨大的。今年双11,阿里云实时大数据系统完成了三项世界级的挑战:1.低延时,从零点第一笔交易发生,到媒体大屏上显示出统计结果,整个处理过程仅延时仅几秒钟;2.高性能、高吞吐,最高处理速度达到千万条/秒,流计算的整体性能比去年提升了N倍;3.高可用,全天服务不降级、无故障,扛下了高峰期所有的流量。而在超大规模的离线数据处理方面,双11期间,阿里云MaxCompute抗下了单天数据处理峰值上百PB,以及百万级的调度作业,这对于作业调度、计算性能、系统稳定性等都是极大的考验。

 

阿里巴巴研究员徐盈辉:在线AI技术在搜索与推荐场景的应用

b6dda25711a8b27e044a991db7602128fde88f17

讲师简介:徐盈辉,阿里巴巴研究员,日本丰桥技术科学大学计算机科学博士,阿里搜索事业部搜索排序和基础算法的负责人。他规划和设计了搜索新一代的排序框架体系,建立了集offline-nearline-online三位一体的电商平台个性化搜索体系,推动和完成了搜索实时在线计算体系的规模化和平台化,在技术的先进性和业务的推动上都取得了突破性成果。

演讲议题:搜索与推荐作为阿里电商平台辅助消费者与商品(卖家)的互动更加趣味化和效率化的智能中枢,不仅仅可以从海量用户行为数据中寻找行为规律,结构化行为序列,并从规律中预测结果,更重要的是给出有效的流量中心化和去中心化的投放决策,从而实现消费者,卖家,平台三者社会福利的最大化。淘宝的搜索和推荐发展到今天,正在从智能的依靠机器学习能力解决业务问题,向更高效的从不确定性中探索目标的学习+决策的能力进化。

 

阿里巴巴高级技术专家袁岳峰:揭秘阿里虚拟互动实验室

d36198a74f691dad64630a7c8a51bd1c56d159ea

讲师简介:袁岳峰,阿里巴巴高级技术专家,阿里移动平台虚拟&互动实验室负责人,GM Lab技术负责人。致力于提升营销互动的能力和效率,探索VR/AR等新技术,并使之应用于现有业务体系中。

演讲议题:无论是创新的Buy+VR购物体验,还是双11丰富多彩的互动玩法,都让广大消费者在满足购物需求的同时提前体验到未来的新零售时代,而这些脑洞大开的技术革命都离不开来虚拟&互动实验室的同学们。本次分享将以VR电商购物为例,探讨手机端的创新体验研发的经验;同时,分享对移动营销活动的快速交付体系的思考。

 

12月7日,探究阿里Docker、数字大屏、数据赋能、前端的“极限挑战”

12月7日将分享四大主题:阿里超大规模Docker化之路、双11媒体大屏背后的数据技术、数据赋能商家背后的AI技术,以及面对双11的前端“极限挑战”

阿里巴巴研究员林昊:阿里超大规模Docker化之路

ba9bccf683a766ddacee64454e40216474e03d74

讲师简介:林昊,阿里巴巴研究员。2007年加入当时的淘宝网,在阿里巴巴的九年时间中经历了多个不同技术领域。打造了阿里目前使用最为广泛的核心中间件之一的服务框架;建设了阿里的HBase团队,发展到今天HBase已经是阿里最重要的NoSQL产品;打造阿里基于LXC的虚拟化系统,以及集群资源管理系统,不断降低阿里巴巴在机器资源上投入的成本;设计并带领团队实现了阿里巴巴技术发展史上具有里程碑意义的异地多活,使阿里巴巴电商系统具备了在中国范围内任意城市部署,并在线热切换的能力。

演讲议题:阿里在Docker化的这条路上,碰到了规模、多元化场景所带来的各种挑战,这次分享中将给大家介绍阿里为什么要引入Docker,以及如何完成这次超大规模的Docker化。

 

阿里巴巴高级技术专家罗金鹏:双11媒体大屏背后的数据技术和产品

ddba2ad33bbd88d0c18b8e5e2978f6829ebb052c

讲师简介:罗金鹏,阿里巴巴高级技术专家,毕业于浙江大学,现负责数据技术与产品部公共数据平台团队,承担了集团数据公共层、阿里数据平台、观星台、生意参谋、集团财报、双11媒体大屏等产品数据研发工作,对数据管理、数据应用、实时和离线计算等技术有丰富的经验。

演讲议题:阿里巴巴数据技术与产品部连续多年承担双11媒体大屏的实时计算开发任务,看似激动人心的数字背后,蕴含着这支技术团队多年来不断进行技术优化、追求卓越的努力,从最开始手忙脚乱、惊心动魄,到现在的轻松应对、运筹帷幄,他们到底进行了哪些技术改进?阿里巴巴公共数据平台团队负责人罗金鹏,将从技术架构、模型重构、资源调度、链路保障等多方面为大家带来精彩的解读。

 

阿里巴巴资深技术专家魏虎:数据赋能商家背后的AI技术

d34e04b0bbf028f9c43d449699c54ce23beeeee8

讲师简介:魏虎,阿里巴巴资深技术专家,早期负责淘宝网站架构,主导了淘宝多个大型架构变迁项目。后期从事大数据方向的技术研发,主导研发了阿里集团的个性化推荐平台,推动并支撑阿里所有重要个性化推荐场景的落地。目前的主要工作是通过大数据和人工智能相关技术提升阿里商家的效能,从而为商家赋能。

演讲议题:大数据时代下,阿里巴巴在平台积累了丰富的经验,并正在从赋能平台向赋能商家演进。我们利用机器学习与人工智能技术,为商家提供一系列更加智能的产品,帮助他们更好的经营。本次分享将为大家介绍阿里是如果利用大数据技术来为商家赋能,包括千人千面的商铺个性化、智能海报、头条等。

 

阿里巴巴高级技术专家舒文亮:面对双11的前端“极限挑战”

0b3cb25b6041d11551a20ca7eaf062ba7dfd4439

讲师简介:舒文亮,阿里巴巴高级技术专家,2016双11前端总PM;天猫前端Team leader,现主要负责天猫营销体系建设,推进跨终端体系、NodeJS在天猫的落地。

演讲议题:2016年是双11历史上对前端挑战最大的一年,来自各个维度的技术挑战当汇聚到一个不容有失的项目,我们的前端们在哪些领域上做了深入?1)100%的服务能力:由前端主导的服务端渲染构(Wormhole)成为了电商系的基础渲染构架,当它面临瞬间十数倍的负载来如何要实现从前到后100%可用、全链路的稳定性?2)秒级的终端体验: 双11团队推进了“秒开项目”,目标是90%的页面能实现秒级体验,前端们进行了HTTP协议、WebP、埋点、Zcache等方案的改进,并将Weex升级为终端渲染的基础方案,在这个过程中有什么哪些经验和雷区?3) VR&3D互动体验: VR和3D的兴起、声势浩大的双11晚会,让双11中的互动技术在难度及稳定上有了更严苛的目标,作为电商领域的吃螃蟹者,我们做了什么?4) 可视化的前端监控:如何量化和评估性能、稳定性、体验,将抽象变为具象并落地到做到系统可视?对以往专注在开发领域的我们来说是新的难题。 5)无障碍的端体验(Accessibility):600万拥有智能设备的视力障碍人士如何做到在双11中拥有购物的平权?这个挑战也让激烈热血的双11蕴含了人文气息。

 

2016年阿里巴巴技术论坛整体议程:

8767e427e77ab7c119d0a6383f1416e2ba79f8cb

4da97b2a6e9faa41666e4095a723971bc69b691e

秉承普惠技术的理念,我们邀请到亲历2016年双11的8位技术大V,首次将1207亿背后的黑科技对外深度解决,并选在技术人最喜欢的时间。希望通过每场2小时的分享,与大家进行深入的互动和讨论。

欢迎将大会报名信息告诉更多朋友。

论坛报名入口:https://yq.aliyun.com/promotion/139

温馨提醒:成功预约报名,可享受论坛结束后全套资料下载并可参加抽奖!

相关实践学习
基于MaxCompute的热门话题分析
本实验围绕社交用户发布的文章做了详尽的分析,通过分析能得到用户群体年龄分布,性别分布,地理位置分布,以及热门话题的热度。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
相关文章
|
存储 机器学习/深度学习 NoSQL
双11大型互动游戏“喵果总动员” 质量保障方案总结
推荐语:互动游戏是一个系统化工程,在笔者的“喵果总动员”质量方案中,可以看到为保障用户体验,我们在各个难点的解决方案, 例如:用线上压测能力支持业务及时调整各服务容量、通过强化学习覆盖游戏行业的测试路径覆盖难题、利用系统异常注入发现corner case等, 都为互动游戏的系统性质量保障提供了方法。 ——大淘宝技术质量工程师 搏天
232 0
双11大型互动游戏“喵果总动员” 质量保障方案总结
|
机器学习/深度学习 算法
阿里首次将用户手势数据用于电商场景!淘宝提出的算法DIPN秒杀传统模型
用户消费行为预测已然是电商领域的经典问题。通过对用户实时意图的理解,我们可以感知用户当下正处于哪个阶段,比如是在买还是在逛,从而可以根据不同阶段制定不同的营销和推荐策略,进而提升营销和推荐效果。
2968 0
|
机器学习/深度学习 传感器 人工智能
技术和产品二重奏:搜狗如何演绎「自然交互和知识计算」
苹果 Siri 的推出让大众开始对语音交互有了初步概念,而这几年深度学习的发展更是使语音识别准确率获得了质的提升。
133 0
技术和产品二重奏:搜狗如何演绎「自然交互和知识计算」
|
机器人 Java 程序员
首次公开!三代技术人深度对话,《云上朗读者》开放下载
阿里云 MVP历时上百天,走近各行各业一线技术人,倾听他们成功背后的故事。蒋江伟(小邪)推荐——18位在前线的阿里云 MVP不为人知的心路历程,科技发展与经济格局的变化,抓住时代机遇勇于创新,从容面对挑战,走近三代技术人解锁他们对新基建与云上未来的深刻洞见。
27418 0
首次公开!三代技术人深度对话,《云上朗读者》开放下载
|
机器学习/深度学习 边缘计算 算法
首次披露!阿里线下智能方案进化史
AI 技术已经从互联网走向零售、汽车、银行等传统行业。受限于延时、成本、安全等多方面的限制,单一的云解决方案往往不能满足场景需求。
1737 0
从内涵段子被下架、快手禁用评论探讨其背后的技术细节
最近闹得沸沸扬扬的是内涵段子被下架,无数网友表示很舍不得,紧接着抖音、快手都在做整改。我当时看到这个新闻的时候不是看内容如何,而是凭借着职业习惯,第一眼就想到了为啥它们这些app可以快速响应国家政策,做出调整?技术上是如何实现的?下面我凭自己的开发经验大概的讲一下如果是我做我会怎么做,思路如下: 写这篇文章的目的:不是为了凑数写的,而是从技术层面去分析大型app可能会怎么做,我们不光要看一个事件,还要要看背后的技术实现。
1709 0