带你读《2022技术人的百宝黑皮书》——国际顶会OSDI首度收录淘宝系统论文, 端云协同智能获大会主旨演讲推荐(4)

简介: 带你读《2022技术人的百宝黑皮书》——国际顶会OSDI首度收录淘宝系统论文, 端云协同智能获大会主旨演讲推荐(4)

带你读《2022技术人的百宝黑皮书》——国际顶会OSDI首度收录淘宝系统论文, 端云协同智能获大会主旨演讲推荐(3) https://developer.aliyun.com/article/1242669?groupCode=taobaotech




在电商推荐场景中,商品页面浏览(Item Page-View, IPV)特征主要记录了用户在某个特定商品的详情页上的行为(例如收藏、加购物车、购买下单等),该特征对于推荐模型起着十分重要的作用。云侧原有的 IPV 特征生产链路,产出一条特征的平均延迟为33.73 秒,同时消耗了大量的计算、通信、存储资源,并存在0.7%的错误率。相比之下,Walle全新的数据管道可以在端侧完成IPV特征生产过程,平均端侧延迟仅为44.16毫秒,同时削减了超过90%的数据量,并保证了特征的正确性。这些结果表明:相较于主流基于云的数据管道,Walle新数据管道大幅提升了特征生产和消费的时效性、高效性和正确性。


image.png


为了测试Walle部署平台的时效性和规模化,随机挑选了一个线上的机器学习任务,并监控了其部署到目标设备群体的整个流程。在保证任务稳定性的前提下,Walle部署平台成功覆盖在线的700万移动端设备需要7分钟,而覆盖所有的2200万设备需要22分钟。


核心模块的Benchmark测试结果


image.png

图6: MNN vs. TensorFlow (Lite), PyTorch (Mobile)



带你读《2022技术人的百宝黑皮书》——国际顶会OSDI首度收录淘宝系统论文, 端云协同智能获大会主旨演讲推荐(5) https://developer.aliyun.com/article/1242663?groupCode=taobaotech

相关文章
|
9月前
|
人工智能 安全 小程序
隐私计算产学研共建发展、隐语 1.0 超前路透(附视频回放)|Meetup 深圳站精华合集
隐私计算产学研共建发展、隐语 1.0 超前路透(附视频回放)|Meetup 深圳站精华合集
214 0
|
3月前
|
机器学习/深度学习 人工智能 算法
re:Invent 云端历程:Swami Sivasubramanian 博士主题演讲-数据共生与开放
re:Invent 云端历程:Swami Sivasubramanian 博士主题演讲-数据共生与开放
|
10月前
|
机器学习/深度学习 自然语言处理 PyTorch
带你读《2022技术人的百宝黑皮书》——国际顶会OSDI首度收录淘宝系统论文, 端云协同智能获大会主旨演讲推荐(5)
带你读《2022技术人的百宝黑皮书》——国际顶会OSDI首度收录淘宝系统论文, 端云协同智能获大会主旨演讲推荐(5)
138 0
|
10月前
|
机器学习/深度学习 数据处理 开发工具
带你读《2022技术人的百宝黑皮书》——国际顶会OSDI首度收录淘宝系统论文, 端云协同智能获大会主旨演讲推荐(2)
带你读《2022技术人的百宝黑皮书》——国际顶会OSDI首度收录淘宝系统论文, 端云协同智能获大会主旨演讲推荐(2)
|
10月前
|
机器学习/深度学习 算法 安全
带你读《2022技术人的百宝黑皮书》——国际顶会OSDI首度收录淘宝系统论文, 端云协同智能获大会主旨演讲推荐(1)
带你读《2022技术人的百宝黑皮书》——国际顶会OSDI首度收录淘宝系统论文, 端云协同智能获大会主旨演讲推荐(1)
121 0
|
10月前
|
UED iOS开发 容器
带你读《2022技术人的百宝黑皮书》——国际顶会OSDI首度收录淘宝系统论文, 端云协同智能获大会主旨演讲推荐(3)
带你读《2022技术人的百宝黑皮书》——国际顶会OSDI首度收录淘宝系统论文, 端云协同智能获大会主旨演讲推荐(3)
|
10月前
|
新零售 人工智能 BI
带你读《2022技术人的百宝黑皮书》——上海交大牵手淘宝成立媒体计算实验室: 推动视频超分等关键技术发展(下)
带你读《2022技术人的百宝黑皮书》——上海交大牵手淘宝成立媒体计算实验室: 推动视频超分等关键技术发展(下)
109 0
|
10月前
|
编解码 计算机视觉
带你读《2022技术人的百宝黑皮书》——上海交大牵手淘宝成立媒体计算实验室: 推动视频超分等关键技术发展(上)
带你读《2022技术人的百宝黑皮书》——上海交大牵手淘宝成立媒体计算实验室: 推动视频超分等关键技术发展(上)
|
机器学习/深度学习 自然语言处理 算法
国际顶会OSDI首度收录淘宝系统论文,端云协同智能获大会主旨演讲推荐
大淘宝技术团队论文入选计算机系统领域顶级国际学术会议OSDI,这是淘宝系统论文首次入选该国际顶会,论文详解了阿里历经四年、自主研发的首个端到端、通用型、规模化产业应用的端云协同机器学习系统“瓦力”——Walle。OSDI特别邀请到的David Tennenhouse在大会主旨演讲中专门推荐了Walle系统,对其技术先进性和应用落地效果赞誉有加。目前,Walle 作为阿里机器学习的基础设施支持 30+APP上 的300+个算法任务。
433 0
国际顶会OSDI首度收录淘宝系统论文,端云协同智能获大会主旨演讲推荐
|
机器学习/深度学习 数据采集 人工智能
百度亮相NeurIPS 首届Expo:向世界科普了一次中国自动机器学习框架
在 NeurIPS 的第一届 Expo 上,百度向 NeurIPS 2018 年大会参与者展现了什么?
136 0
百度亮相NeurIPS 首届Expo:向世界科普了一次中国自动机器学习框架