近日,阿里巴巴宣布加入 Linux Foundation AI&Data 基金会,持续加大对 AI 和大数据技术的投入以促进相关开源建设。
阿里巴巴是 Linux 的活跃开发者,此前已经为 Linux 内核提交了 290 多个 Patch。除了 Linux 之外,阿里巴巴在 MySQL、JVM、Web 服务器等知名项目中均有杰出贡献,也是开源组织 WebScaleSQL 的 5 大成员之一。
阿里云机器学习平台 PAI 和大数据平台技术负责人林伟表示:“加入 Linux Foundation AI&Data 基金会有助于阿里巴巴更加深入地理解 LF AI&Data,更多地参与到技术与标准制定讨论当中,主动把握未来大数据和 AI 发展方向”。
此次,在加入 Linux Foundation AI&Data 基金会的同时,阿里巴巴也积极地回馈社区,将面向推荐场景的高性能深度学习框架 DeepRec 捐赠给 Linux Foundation AI&Data 基金会托管。
DeepRec 是阿里云机器学习平台 PAI 开源的面向推荐场景的高性能深度学习框架,针对稀疏模型在分布式、图优化、算子、Runtime 等方面进行了深度的性能优化,同时提供了搜索、推荐、广告场景下特有的动态弹性特征,动态弹性维度,自适应 EmbeddingVariable、增量模型导出及加载等一系列功能。
DeepRec 在阿里巴巴集团内部广泛应用于淘宝、天猫、阿里妈妈、高德、淘特、AliExpress、Lazada 等,支持了淘宝搜索、推荐、广告等核心业务,支撑着千亿特征、万亿样本的超大规模稀疏训练。DeepRec 开源一年多以来,已经在数十家公司的搜推广业务场景中大规模应用,带来了巨大的业务价值。
Linux Foundation AI&Data 基金会执行董事 Ibrahim Haddad 博士对此表示热烈欢迎,“DeepRec 凭借其在深度学习推荐框架方面令人印象深刻的成果,为技术项目带来创新的解决方案。很高兴与 DeepRec 合作进一步开发和增强这一强大的开源技术。借助 Linux Foundation AI&Data 基金会的专业知识和资源,携手共进一同推动深度学习的进步,并彻底改变处理推荐系统的方式。”
阿里巴巴在 DeepRec 捐赠后,将继续和 LFAI&Data 一起持续维护和推广 DeepRec,打造面向搜推广场景的深度学习框架生态,吸引更多的公司和团队参与到 DeepRec 使用和开发中来。此外阿里巴巴将会更加积极开放地参与到更多的开源基金会,并将在适当时候捐献部分软件项目给基金会托管。