大数据计算引擎,为什么阿里坚定地选择 Flink?| 直播预告

本文涉及的产品
实时计算 Flink 版,5000CU*H 3个月
简介:

为什么玛雅人公元前就掌握了斗转星移的规律?

为什么AlphaGo 4比1战胜围棋世界冠军?

为什么城市大脑能有效预测城市运转的规律?

科技文明的每次进步,都离不开计算的力量。随着技术的发展,AI 时代呼之欲出。这一切,无不对计算提出了更高要求:Faster,smarter,and more accurate。

在时代的大背景下,阿里巴巴如何应对挑战?

9月13日晚,锁定阿里技术直播,对话阿里实时计算大牛,共同探索计算之美。

54da92c7c00e460214f8332805cc92a706a830da

为什么要学习 Flink?

针对大数据的应用场景,在批处理的基础之上,越来越多的企业对流处理有了更多的需求,因为他们的产品对计算的实时性以及多样性有了更高更丰富的要求。但是传统的大数据计算框架并没有能够很好地融合批计算和流计算,因此各个企业都需要将批处理和流处理的任务分开部署,大大增加了运维成本(两套引擎)和开发成本(两套任务作业)。对于企业来说,这种架构很难维护,成本较高。对于学习大数据的同学来说,学习成本较高。在这种情况下,新一代的大数据框架应用而生。

Flink 是一款同时支持流处理和批处理的计算引擎。它针对大数据的分布式计算提供了高效的数据通信及快速容错等机制。此外也提供了很友好的高抽象层的 API 便于用户编写分布式任务。Flink 本身在流处理场景就有着诸多天然的优势,是世界上最先进的流处理引擎,被各大企业广泛的应用。针对批处理场景,阿里巴巴最近对 Flink做了诸多优化使得 Flink 也拥有了世界一流的批处理计算能力。

本期大咖嘉宾是谁?

9f01dff81b109b81d867dc4b02329683d9ed10f3

花名:大沙

大沙,阿里资深技术专家,同时也是 Apache Flink Committer。他是加州大学圣迭戈分校计算机工程博士,于2015年加入阿里巴巴集团,目前就职于阿里巴巴计算平台事业部。在加入阿里之前,曾在 Facebook 开发分布式图关系数据库TAO。
加入阿里之后,大沙一直从事阿里新一代计算平台 Blink 的研发工作。现在负责基于 Blink 的计算平台和算法平台。加入阿里之初,他负责搜索事业部的离线大数据处理,利用半年的时间带领团队将阿里淘宝、天猫搜索离线数据的计算,全部迁移到 Blink 计算平台之上。之后负责 Blink 计算平台的查询和优化。仅用时半年多,就打造了一套功能完备高性能的实时计算 Blink SQL&Table API,并成功地将阿里的实时机器学习计算平台整体地迁移到这套API之上。大沙是 Apache Flink Committer,除了自己,他在团队内部还培养出另外2位 Apache Flink Committer。
哪些直播亮点值得期待?
●  大数据领域当前发展状况,以及趋势如何?
●  随着IOT、人工智能的发展,万物互联时代俨然已来,实时计算随之风生水起,作为下一代大数据计算引擎,火的一塌糊涂的Flink究竟是啥?
●  为什么阿里坚定地选择 Flink?
●  阿里巴巴在流处理和批处理上对Flink都做了哪些优化,Flink 在流处理和批处理上和其他开源计算引擎相比都有哪些优势?
●  Flink 在阿里承担了哪些重任,有哪些典型的应用场景?
●  想要参与开源贡献却无处下手,如何快速成为开源项目的 committer?
●  当下最抢手的大数据工程师需要具备哪些特质与技能?

在直播中,这些你感兴趣的问题,都能找到答案!

除了干货内容,更有精彩互动

直播过程中将预留30分钟左右时间,专门解答大家的问题。如果你有更多想听的内容,也欢迎在文章底部留言。

当然,阿里妹还联合 Flink China 社区为大家准备了一大波神秘周边,送给参与直播的你~

经验是不可跨越的,但是我们可以让经验积累的过程变得短些。一切准备就绪,只等君来。9月13日晚,让我们不见不散!

最后,阿里妹再为大家详细介绍本次直播观看形式:

0431bb5a0299060aab32030f225bc9ca7c5e4933

1、使用钉钉App,扫描上方二维码,加入Flink交流群

2、本次直播将通过钉钉群直播形式举行,直播结束后可免费观看、下载视频。

3、钉钉群将永久保留,方便你与志同道合的技术人交流。


原文发布时间为:2018-09-12

本文作者:期待直播的

本文来自云栖社区合作伙伴“阿里技术”,了解相关信息可以关注“阿里技术”。

相关实践学习
简单用户画像分析
本场景主要介绍基于海量日志数据进行简单用户画像分析为背景,如何通过使用DataWorks完成数据采集 、加工数据、配置数据质量监控和数据可视化展现等任务。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
相关文章
|
3月前
|
存储 数据采集 大数据
大数据处理与分析技术:驱动智能决策的引擎
本文介绍了大数据处理与分析技术在现代社会中的重要性和应用。从数据采集、存储、处理到分析决策,大数据技术为我们提供了深入洞察和智能决策的能力,推动着各行各业的创新和发展。
52 0
|
5月前
|
存储 分布式计算 Hadoop
【大数据】Hadoop技术解析:大数据处理的核心引擎
【大数据】Hadoop技术解析:大数据处理的核心引擎
160 0
|
4月前
|
SQL 消息中间件 Kafka
流数据湖平台Apache Paimon(二)集成 Flink 引擎
流数据湖平台Apache Paimon(二)集成 Flink 引擎
378 0
|
1月前
|
存储 SQL Java
阿里Flink云服务提供了CDC(Change Data Capture)功能
【2月更文挑战第10天】阿里Flink云服务提供了CDC(Change Data Capture)功能
34 1
|
2月前
|
SQL 大数据 API
大数据技术之Flink---day01概述、快速上手
大数据技术之Flink---day01概述、快速上手
76 4
|
2月前
|
SQL 并行计算 大数据
【大数据技术攻关专题】「Apache-Flink零基础入门」手把手+零基础带你玩转大数据流式处理引擎Flink(基础加强+运行原理)
关于Flink服务的搭建与部署,由于其涉及诸多实战操作而理论部分相对较少,小编打算采用一个独立的版本和环境来进行详尽的实战讲解。考虑到文字描述可能无法充分展现操作的细节和流程,我们决定以视频的形式进行分析和介绍。因此,在本文中,我们将暂时不涉及具体的搭建和部署步骤。
496 3
【大数据技术攻关专题】「Apache-Flink零基础入门」手把手+零基础带你玩转大数据流式处理引擎Flink(基础加强+运行原理)
|
3月前
|
弹性计算 大数据 调度
Flink中Mesos在大数据领域中使用较多
【1月更文挑战第19天】【1月更文挑战第92篇】Flink中Mesos在大数据领域中使用较多
34 1
|
4月前
|
分布式计算 Java API
大数据Flink面试考题___Flink高频考点,万字超全整理(建议)
大数据Flink面试考题___Flink高频考点,万字超全整理(建议)
107 0
|
4月前
|
SQL 分布式计算 MaxCompute
Apache Flink目前不支持直接写入MaxCompute
Apache Flink目前不支持直接写入MaxCompute
53 3
|
4月前
|
大数据 BI
阿里十年大数据专家谈“云上数据中台之道”含内部PPT
从大数据的概念被正式提出,到马云老师预言人类正从IT时代走向DT时代,大数据浪潮迭起。大数据同仁共同认知的一点是,大数据会对社会创新、产业变革、业务创新及每个人的角色定位产生近乎决定性的影响。