开发者社区 > 阿里技术 > 视频 > 正文

【周二开源日第二十一期】Vineyard | 开源分布式内存数据管理引擎

发布者:开发者小助理 2021-02-19 18:20:31 35375
视频介绍

【开发者优惠来了】全网最低价,阿里云爆款服务器低至8.1元/月,更有针对学生的专享福利全面升级,戳:http://click.aliyun.com/m/1000188819/

Vineyard 开源项目地址:https://github.com/alibaba/libvineyard

【周二开源日系列直播】是阿里云开发者社区集结阿里巴巴各开源产品负责人,每周二19:00-20:00为大家带来阿里巴巴开源的最新最佳实践、社区参与等新鲜内容的直播栏目。

戳我前往专题页看更多精彩内内容,更有阿里入职机会提供哦

本期直播时间:2021-2-23 19:00-20:00

直播主题:Vineyard | 开源分布式内存数据管理引擎

直播简介:

针对当前大数据工作流中,不同系统间难以高效共享分布式中间数据的难题,我们研发和开源了 Vineyard,一个专为大数据场景下,端到端计算任务设计的分布式数据共享引擎。它让数据在流水线上各个专业系统的内存间流动,同时它提供开箱即用的高级数据结构(例如,张量,图)抽象,来方便各个专业系统在数据接口上的开发工作。最终,Vineyard 使得用户在整个流程中像使用本地数据变量一样,轻松的访问分布式数据,极大的提升用户研发大数据工作流的效率。

本次演讲会首先从Vineyard要解决的问题的背景入手,介绍Vineyard的设计动因和整体架构,并通过一个例子展示如何使用Vineyard来共享数据,最后还将分享Vineyard结合云原生能力,赋能更大数据应用场景的尝试和愿景。

讲师简介:

迪杰:阿里巴巴技术专家,Vineyard项目co-founder
临竹:阿里巴巴高级开发工程师,Vineyard项目co-founder