阿里技术天团来到硅谷,他们都讲了什么?

简介:


image

8月6日,星期日,位于美国硅谷北乌尔夫路440号,Plug and Play Tech Center公司的会议室里座无虚席。哦不,应该说是“站无虚席”才对。此时此刻正在进行的,是阿里巴巴技术开放日。

“技术开放日”,英文叫做“Tech Open-Day”,这并非是阿里巴巴首创的概念。在这个号称全球科技核心的地方,许多公司会隔三差五的举办类似的活动,也会引起诸多从业者的围观。


image


硅谷,是当之无愧的全球创新中心和圣地,每天有许许多多企业家、投资人和创业者来到这里举办创新创业活动。但中国的互联网公司在此发起如此大规模的技术交流活动还是少数。这一次,阿里希望在硅谷找到一大批懂得技术、热爱技术,并且能够与阿里一道,推动中国乃至世界IT技术发展的人才。相对应的,阿里提供的职位和待遇也是相当的优厚,留在美国或者回国效力,这对于人才来说都是可以选择的道路。

凡是太阳照到的地方,就有我们的数据中心

率先发言的是阿里巴巴基础设施事业群(Alibaba Infrastructure Service group,简称AIS)的负责人之一周明,他所带领的团队负责数据中心的布局和运营,硬件和网络技术研发,全球基础设施运营和监控等。


image


在演讲之初,周明首先整体介绍了AIS的基本情况,并且谈到了部门的工作目标——为阿里巴巴提供稳定、可靠、可持续的基础设施服务。作为支撑集团所有业务的核心技术部门,我们熟悉的淘宝、天猫、阿里云、蚂蚁金服、菜鸟物流等许多业务都依赖集团大AIS事业群的支持,或者可以说,AIS是整个阿里巴巴业务生态系统的技术基石。

在数据中心技术上,AIS目前的主要精力放在如何应对大型或超大型数据中心的能耗与PUE降低的问题。对于阿里巴巴这样体量的互联网公司来说,如何搭建超大规模的数据中心并管理好它,已经成为了摆在面前的突出问题,并且将持续影响阿里巴巴的发展能力。阿里巴巴已在IDC降低耗电、提升效率方面取得不错的进展。


image


2015年建成的阿里巴巴千岛湖数据中心,采用来自千岛湖下的冷水进行数据中心散热,设计年平均PUE(能源效率指标)低于1.3,最低时PUE1.17,比普通数据中心全年节电约数千万度,减少碳排放量一万多吨标煤,已成为国内亚热带最节能的数据中心之一;2016年投入运营的阿里张北数据中心,这是一个常年利用自然风冷和自然水冷进行散热的数据中心,全年只有15天需要采用传统的冷却方式,同时当地丰富的风电、光电等绿色能源可就地转化成计算资源供全球使用。

在服务器硬件定制方面,比如CPU、网络设备、存储等方面,AIS正在朝白盒化方向努力,另外,在软硬件一体优化方面也不断突破,比如自研的Ali-Flash存储,结合上层块存储的系统优化,存储性能得到一个极致的提升。另外架构上也正朝计算存储分离的方向上演进。

现如今的阿里巴巴网络已经是一个全球的网络, AIS也不满足于现有的成绩,25G、100G网络已经远远不能满足它的需求,更高规格的400G网络已经纳入了AIS的应用计划当中。同时,AIS 从最底层的传输到交换机、光模块,到交换机OS,到虚拟网络,到网关系统,到Qos到流量管理,到智能化的管理系统等等,都有研发投入,并且和数据中心风火水电、服务器计算存储软硬件相结合,推出“一体化”的解决方案。

除了数据中心硬件的要求之外,在软件与平台的应用层面,阿里巴巴研发出了能够管理超大规模数据中心和服务器集群的“飞天”系统。它可以把上万台服务器连接成一台超级计算器,从而不知疲倦的提供强大的计算能力,使得基础设施更为健壮。


image

“如今,除了中国的华北、华东、华南等多个地区,包括香港、新加坡、迪拜、法兰克福、美国、巴西、澳大利亚等多个国家和地区都有阿里的数据中心。基本上有太阳照的地方就有我们的数据中心”,说到这里的时候,周明尤其激动。

在普通人眼里,全球数据中心、服务器和网络技术看起来非常成熟,且不断向前演进,然而在当今互联网快速发展及各种超大规划需求的驱动下,互联网规模的业务压力带来的基础设施需求才是阿里巴巴的挑战,同样也是阿里巴巴和AIS人的机遇。

美国代表技术前沿,中国代表落地应用

既然阿里巴巴基础设施已在全球范围内实现了布局,那为什么还希望在硅谷招募人才?这些人才又会对阿里巴巴的业务和技术发展带来怎样的帮助呢?在活动现场,阿里巴巴系统软件事业部和研发效能事业部负责人林昊(花名毕玄)从另外一个角度,对这些问题进行了详细解读。

image

同样作为AIS事业群的的负责人之一,毕玄的工作职责是打造世界一流的系统软件和高效的研发协调管理平台。他所带领的系统软件团队,以充分高效利用数据中心、服务器、网络等底层硬件的性能为己任,目前在Linux Kernel、资源调度系统、容器及JVM等领域不断取得突破。在研发协作和和研发效能方面,他期望阿里巴巴在这样的体量下能够形成更好的协作开发模式和取得更高的研发效率。

阿里巴巴有着非常庞大且复杂的各种业务场景,而且构建起足够好的容错系统,对于喜欢创新的技术人员来说,这是一个非常好的创新试验场,即使你失败了,业务也不会受到什么影响。另外,阿里云作为国内第一的云计算平台,可以短时间内汇集大量真实的用户反馈,从而给技术团队以充分的修改意见和指导。

在毕玄的演讲中,快速迭代是一个经常提到的词汇,对于互联网公司来说这也是创新的不竭动力。一次次的软件升级、一次次的BUG修正,随着这样的过程不断重复,毕玄带领的团队在阿里内部交出了满意的答卷,在部分领域也达到了国际顶尖水平。但即便如此,毕玄还是不能满足。


image

正如我们之前提到的,硅谷是全球IT精英的聚集地,在这里你可以体验到最前沿的技术,结识最顶尖的人才。既然得益于快速迭代,毕玄就希望保持住这样的优势,从而他希望能够在硅谷找到与阿里技术人一样、站在行业应用前沿的人才。

按照毕玄的设想,AIS美国团队应该负责研发中“最难啃的硬骨头”,也就是“技术方向中相对更加困难、更加耗时,且需研发周期的部分”,这样凭借着硅谷的前瞻性视野和技术实力,能够形成创新性的优势与突破;相比之下,中国团队已经有了多年的应用经验,特别是借助于淘宝、天猫等平台,中国团队有着全球最广大的用户群,能够在落地应用的层面得到最真实的用户反馈,从而帮助业务落地,不断迭代并完善。

除此之外,美国团队的存在对于阿里巴巴海外市场的品牌影响力提升也是大有裨益的,可以帮助阿里巴巴在应用领域更加完善,表现更出色。

技术驱动 业务能力云化构建未来商业基础设施

在下半场的技术交流中,首先登场的是来自阿里巴巴中间件事业部负责人蒋江伟(花名小邪),相对上半场从基础硬件及系统软件层面展示阿里目前的挑战及发展,小邪则先回顾了阿里中间件的发展历史。随着阿里巴巴业务规模和多样性的迅速提升,对业务架构带来的挑战急剧增加,平台的统一性及和集中化管理的需求迫在眉睫。阿里技术人通过建立共享服务层、大规模部署及使用分布式中间件等方式,帮助业务单元大幅降低系统的响应时间,提升业务效率,降低成本。特别是在双11大促这样的场景下,打造出场景化流量压测,容量规划等业界有名的技术方案。

image

在小邪看来,企业要从传统IT架构转向互联网,需要系统具备分布式能力、不停扩张的能力、可靠的容错能力和服务化的能力等等。由此,阿里中间件将内部技术演进成企业级应用框架EDAS、分布式数据库DRDS和消息队列MQ等产品,将阿里在构建大规模高可用互联网架构上的技术积累,通过阿里云赋能传统企业客户。

在此后的演讲环节,来自数据库技术团队的圭多和存储技术团队的福贝,各自分享了目前阿里在数据库和存储技术上的进展,以及在业务迅速扩张下所遇到的技术挑战。


image


最后的问答环节中,包括多隆、毕玄、小邪等人在内的一众阿里技术“大咖”再次登台,就现场观众关心的问题进行了回答。除了技术性的话题之外,嘉宾还就美国团队的定位与使命、阿里巴巴在AI时代的应用前瞻等问题进行了回复,现场气氛非常热烈。

从商业驱动到技术驱动,阿里巴巴的未来之路

说了这么多,在提到阿里巴巴的时候,许多人还会直观的联想到淘宝、天猫等电商平台,及阿里巴巴在物流、支付等商业模式上的成功。但是事实上,借助于技术的力量,阿里早已不再是一家商业模式驱动的商业公司,如今的阿里正在朝技术驱动业务的方向大踏步前进。

早在今年3月,阿里巴巴便宣布了“NASA”计划,旨在聚焦机器学习、芯片、IoT、操作系统、生物识别等核心技术,面向未来20年组建崭新的团队,全力以赴进行新技术研发,为服务20亿人的新阿里商业生态储备核心科技。


image

这是一项相当长远的计划,也是未来阿里巴巴努力的方向和目标。我们都知道,NASA是美国航空航天局的简称,可能也是地球上知名度最高,最酷炫,搬上大银幕次数最多的行政性科研机构。阿里将新的计划命名为“NASA”,也是希望像NASA一样在驱动人类科技和生活进步方面发挥作用。

俗话说,科技是第一生产力。人民大众只记得阿里在每一个“双11”创造的销售奇迹,却没有看到这背后来自于基础架构、系统软件、效能优化等平台给予的支持。正是这些被普通大众所忽略的技术支撑和创新,不断地推动阿里巴巴商业上的成功。正是得益于云计算、大数据、人工智能、移动互联等新技术的应用,才有了阿里在商业领域创造的一个又一个奇迹,才有了“NASA”计划的坚实基础。

如今,阿里要把技术从商业的光芒中拿出来,进而成为一家科技公司。作为拥有几亿用户的科技公司,拥有许多传统大型科技公司所不具有的优势:它最懂用户需求,最懂用户体验,最懂如何用技术和大数据指导生产来满足需求,最懂如何能最快地把产品推向市场。

目前,阿里巴巴有超过2万名工程师;36位合伙人中,有9位拥有工程师背景。此前,阿里巴巴在超大规模计算操作系统、移动操作系统、金融级分布式数据库、机器学习平台等核心基础技术领域已持续投入近10年,成果斐然。

或许,未来十几二十年关注点很可能不再是今天提到的那几个技术研究方向,但,重要的是保持对科技力量的追逐,更重要的是要将这些成果迅速转化实际应用。

也许,我们无法简单回答“阿里巴巴是一家什么公司”,但是对于技术的追求,是阿里巴巴一直的宗旨,过去是,现在是,将来也是。

来源:阿里技术
原文链接

相关文章
|
开发者
阿里云开发者大会火热报名中,5月29日北京等你!
你想知道数字时代,如何更好地利用云的能力?什么是新型、便捷的开发模式?如何让开发者更高效地构建应用?阿里云有哪些专属于开发者的扶持计划吗?开启专属于你的邀请函,5月29日(周六)我们在【北京国家会议中心】等你
24058 0
阿里云开发者大会火热报名中,5月29日北京等你!
从硅谷到杭州:一个海归的阿里故事
受云栖社区邀请,来分享下自己的成长故事。 本人目前是阿里云网络产品团队的产品运营专家,负责网络产品的一系列市场活动和品牌建设。
12192 0
三年后,我又来到了北京
我再次来到了北京,距离上次,时间已过去3年 三年前的那个暑假,机缘巧合,我去参加北京植物所开的光合夏令营。当时来回只能报销火车的硬座票,所以我硬生生从发车的下午坐到了隔天的上午,坐着实在是不舒服,一宿未眠。
1273 0
|
存储 人工智能 达摩院
【云栖大会】超详细!阿里云栖大会开幕主论坛核心干货!
马云详解阿里研究院,两周前钦定名达摩院,3年投入千亿,要活超85年,赶超IBM微软。
7804 0
|
人工智能 物联网 大数据
笃行出真知,报名参加云栖大会成都峰会的四大理由
2017云栖成都峰会将全方位展示最新云上产品,以全新视角解读大数据时代下的新营销新生态,带你畅快感知计算无边界。本次峰会是2017年继深圳站和南京站的第三站,在前两站的基础上极大升级与会体验,集合政府、阿里云、专家学者、合作伙伴、媒体等多方生态于一体,呈现丰富的应用案例与实战经验。
5377 0
|
边缘计算 Cloud Native 大数据
2019阿里云峰会·北京,重磅报道合集
从2009年1月,马老师和阿里云飞天研发团队的第一张合影;到2019年,中国第一,亚洲最大,全球前三。2019阿里云峰会·北京。这1次,再出发!
8578 0
|
Kubernetes 安全 Java
2018 DockerCon 欧洲大会召开在即,精彩内容不容错过!
参加会议的价值在于您可以在会上学习到多少新知识以及您在会场可以遇到哪些人。DockerCon 大会很好的涵盖了这两个方面,同时我们还知道每个人都有着不同的学习方式,为此我们的会议为您提供了三种选择......
1927 0
|
存储 监控 搜索推荐
2017北京ArchSummit-参会感想
# 大会背景 时间:2017.12.8~2017.7.9 地点:北京 会议:ArchSummit -北京 2017架构师峰会 日程:http://bj2017.archsummit.com/schedule # 我关注的点 1. 架构升级和优化 2. 高可用体系的一些专题 # 架构升级和优化
2213 0
下一篇
无影云桌面