阿里云实时计算Flink_社区达人页

2021年05月

• 05.13 15:37:12
  发表了文章 2021-05-13 15:37:12

  实时计算Flink版与开源 Apache Flink 性能对比

  将从开发、运维、成本、安全等四个维度进行对比。

  
• 05.12 10:43:58
  发表了文章 2021-05-12 10:43:58

  Flink 最佳实践之使用 Canal 同步 MySQL 数据至 TiDB

  本文将介绍如何将 MySQL 中的数据，通过 Binlog + Canal 的形式导入到 Kafka 中，继而被 Flink 消费的案例。

  
• 05.11 18:45:47
  发表了文章 2021-05-11 18:45:47

  PyFlink Table API - Python 自定义函数

  Python 自定义函数是 PyFlink Table API 中最重要的功能之一，其允许用户在 PyFlink Table API 中使用 Python 语言开发的自定义函数，极大地拓宽了 Python Table API 的使用范围。

  
• 05.10 15:06:45
  发表了文章 2021-05-10 15:06:45

  Flink 实时计算在微博的应用

  微博通过将 Flink 实时流计算框架跟业务场景相结合，在平台化、服务化方面做了很大的工作，在开发效率、稳定性方面也做了很多优化。我们通过模块化设计和平台化开发，提高开发效率。

  
• 05.07 19:18:19
  发表了文章 2021-05-07 19:18:19

  百信银行基于 Apache Hudi 实时数据湖演进方案

  本文介绍了百信银行实时计算平台的建设情况，实时数据湖构建在 Hudi 上的方案和实践方法，以及实时计算平台集成 Hudi 和使用 Hudi 的方式。

  

2021年04月

• 04.30 15:38:10
  发表了文章 2021-04-30 15:38:10

  Flink on Zeppelin 系列之：Yarn Application 模式支持

  Zeppelin 如何实现并使用 Yarn Application 模式。

  
• 04.29 23:38:57
  发表了文章 2021-04-29 23:38:57

  阿里云超强专家阵容倾力打造实时数仓 “王炸组合”，只需 5 天从 0 到 1，结营抢好礼，速来报名！

  《实时数仓入门训练营》，理论与实践的摩擦，概念与案例的碰撞，从 0 到1 快速上手，让自己技能加点，速来报名！

  
• 04.28 20:01:13
  发表了文章 2021-04-28 20:01:13

  Apache Flink Meetup 北京站，1.13 新版本发布 x 互娱场景实践分享的开发者盛筵！

  Flink 1.13 版本新功能的深入解读+Flink 在互娱行业典型实践应用。

  
• 04.27 15:22:23
  发表了文章 2021-04-27 15:22:23

  如何从 0 到 1 开发 PyFlink API 作业

  以 Flink 1.12 为例，介绍如何使用 Python 语言，通过 PyFlink API 来开发 Flink 作业。

  
• 04.25 17:55:12
  发表了文章 2021-04-25 17:55:12

  Flink 在唯品会的实践

  Flink 在唯品会的容器化实践应用以及产品化经验。

  
• 04.25 17:07:28
  发表了文章 2021-04-25 17:07:28

  贝壳基于 Flink 的实时计算演进之路

  贝壳找房在实时计算之路上的平台建设以及实时数仓应用。

  
• 04.25 11:06:57
  发表了文章 2021-04-25 11:06:57

  回顾 | Apache Flink x Iceberg Meetup · 上海站精彩回顾 (附PPT下载)

  PPT下载链接来啦！

  
• 04.21 20:19:38
  发表了文章 2021-04-21 20:19:38

  Flink + Hudi 在 Linkflow 构建实时数据湖的生产实践

  可变数据的处理一直以来都是大数据系统，尤其是实时系统的一大难点。在调研多种方案后，我们选择了 CDC to Hudi 的数据摄入方案，目前在生产环境可实现分钟级的数据实时性，希望本文所述对大家的生产实践有所启发。

  
• 04.19 17:28:13
  发表了文章 2021-04-19 17:28:13

  融合趋势下基于 Flink Kylin Hudi 湖仓一体的大数据生态体系

  本文由 T3 出行大数据平台负责人杨华和资深大数据平台开发工程师王祥虎介绍 Flink、Kylin 和 Hudi 湖仓一体的大数据生态体系以及在 T3 的相关应用场景。

  
• 04.15 11:38:03
  发表了文章 2021-04-15 11:38:03

  汽车之家基于 Flink 的数据传输平台的设计与实践

  数据接入与传输作为打通数据系统与业务系统的一道桥梁，是数据系统与架构中不可或缺的一个重要部分。数据传输系统稳定性和准确性，直接影响整个数据系统服务的 SLA 和质量。此外如何提升系统的易用性，保证监控服务并降低系统维护成本，优雅应对灾难等问题也十分重要。

  
• 04.14 10:49:58
  发表了文章 2021-04-14 10:49:58

  知乎的 Flink 数据集成平台建设实践

  本文由知乎技术平台负责人孙晓光分享，主要介绍知乎 Flink 数据集成平台建设实践。内容如下： 1. 业务场景 ； 2. 历史设计 ； 3. 全面转向 Flink 后的设计 ； 4. 未来 Flink 应用场景的规划。

  
• 04.12 18:46:15
  发表了文章 2021-04-12 18:46:15

  免费下载！Apache Flink 必知必会电子书， 轻松收获 Flink 生产环境开发技能

  “实时计算”不再只是未来趋势，它已经融入到企业生产的各个环节之中。一线开发同学如何掌握大数据极致算力应用，企业如何全面提升数据服务能力？

  
• 04.12 11:31:29
  发表了文章 2021-04-12 11:31:29

  实时 OLAP， 从 0 到 1

  BTC.com 团队在实时 OLAP 方面的技术演进过程及生产优化实践。

  
• 04.08 10:55:50
  发表了文章 2021-04-08 10:55:50

  【必看】如何正确使用实时计算 Flink 版？

  本篇文章将从实时计算 Flink 版产品功能、产品架构、产品模式、产品优势、产品应用场景等全面呈现，同时还汇总了实时计算 Flink 版学习资料！更有特惠独享活动限时参与！

  
• 04.06 17:32:55
  发表了文章 2021-04-06 17:32:55

  Flink集成Iceberg在同程艺龙的实践

  本文由同城艺龙大数据开发工程师张军分享，主要介绍同城艺龙 Flink 集成 Iceberg 的生产实践。

  
• 04.06 11:23:11
  发表了文章 2021-04-06 11:23:11

  Flink 必知必会经典课程8：Flink Connector 详解

  关于Flink Connector的详解，本文将通过四部分展开介绍：1. 连接器；2. Source API；3. Sink API；4. Collector的未来发展。

  
• 04.01 11:03:55
  发表了文章 2021-04-01 11:03:55

  Apache Flink Meetup · 上海站，超强数据湖干货等你！

  Apache Flink x Iceberg Meetup 上海站

  

2021年03月

• 03.31 11:16:50
  发表了文章 2021-03-31 11:16:50

  腾讯游戏实时计算应用平台建设实践

  本文由腾讯游戏增值服务部数据中心许振文分享，主要介绍腾讯游戏实时计算应用平台的建设实践。

  
• 03.31 10:49:33
  发表了文章 2021-03-31 10:49:33

  爱奇艺大数据生态的实时化建设

  实时化是大数据未来最重要的方向之一。

  
• 03.29 15:35:29
  发表了文章 2021-03-29 15:35:29

  Hudi on Flink 快速上手指南

  本文由阿里巴巴的陈玉兆分享，主要介绍 Flink 集成 Hudi 的最新版本功能以及快速上手实践指南。

  
• 03.25 15:49:57
  发表了文章 2021-03-25 15:49:57

  Flink 执行引擎：流批一体的融合之路

  本文由 Apache Flink Committer 马国维分享，主要介绍 Flink 作为大数据计算引擎的流批一体融合之路。

  
• 03.24 15:53:21
  发表了文章 2021-03-24 15:53:21

  官方指南！史上最全实时计算 Flink 版学习资料汇总（长期更新）

  阿里云实时计算 Flink 版：企业级、高性能、Serverless 实时大数据服务。

  
• 03.23 17:10:15
  发表了文章 2021-03-23 17:10:15

  七大经典技术场景！Apache Flink 在多维领域应用的 40+ 实践案例

  随着 Apache Flink 自身的发展，越来越多的企业选择 Apache Flink 应用于自身的业务场景，如底层平台建设、实时数仓、实时推荐、实时分析、实时大屏、风控、数据湖等场景中，解决实时计算的需求。

  
• 03.23 16:50:09
  发表了文章 2021-03-23 16:50:09

  实时数仓专题 | Apache Flink 实时数仓最佳实践

  随着数字化业务的增长，企业的数据量呈现爆发式增长，数据仓库已经成为企业数据发展到一定规模后必然提供的基础服务之一。

  
• 03.22 17:33:07
  发表了文章 2021-03-22 17:33:07

  Flink 必知必会经典课程2：Stream Processing with Apache Flink

  本篇内容包含三部分展开介绍Stream Processing with Apache Flink：1、并行处理和编程范式；2、DataStream API概览及简单应用；3、 Flink 中的状态和时间。

  
• 03.19 11:02:34
  发表了文章 2021-03-19 11:02:34

  字节跳动单点恢复功能及 Regional CheckPoint 优化实践

  本文介绍字节跳动在过去一段时间里做的两个主要的 Feature，一是在 Network 层的单点恢复的功能，二是 Checkpoint 层的 Regional Checkpoint。

  
• 03.18 19:36:57
  发表了文章 2021-03-18 19:36:57

  十大行业经典案例！Apache Flink 的 40 个最佳实践

  如今，Apache Flink 行业应用几何？在降本增效的需求驱动下，企业如何实现数据与算力价值最大化？本文整理了 Flink 社区近一年的社区案例，并按照行业进行分类，供大家参考！

  
• 03.17 17:28:35
  发表了文章 2021-03-17 17:28:35

  Flink 必知必会经典课程4：Fault-tolerance in Flink

  本文由 Apache Flink PMC , 阿里巴巴高级技术专家李钰分享，主要从有状态的流计算、全局一致性快照 、Flink的容错机制、Flink的状态管理 四个方面介绍 Flink 的容错机制原理。

  
• 03.17 16:29:04
  发表了文章 2021-03-17 16:29:04

  Flink 必知必会经典课程6：PyFlink 快速上手

  本文介绍了PyFlink项目的目标和发展历程，以及PyFlink目前的核心功能，包括Python Table API、Python UDF、向量化Python UDF、Python UDF Metrics、PyFlink依赖管理和Python UDF执行优化，同时也针对功能展示了相关demo。

  
• 03.17 16:14:50
  发表了文章 2021-03-17 16:14:50

  Flink 必知必会经典课程3：Flink Runtime Architecture

  众所周知 Flink 是分布式的数据处理框架，用户的业务逻辑会以Job的形式提交给 Flink 集群。Flink Runtime作为 Flink 引擎，负责让这些作业能够跑起来并正常完结。这些作业既可以是流计算作业，也可以是批处理作业，既可以跑在裸机上，也可以在Flink集群上跑，Flink Runtime必须支持所有类型的作业，以及不同条件下运行的作业。

  
• 03.17 11:16:43
  发表了文章 2021-03-17 11:16:43

  Flink SQL 在网易云音乐的产品化实践

  云音乐的性能优化、运维完善实战经验分享。

  
• 03.12 16:44:19
  发表了文章 2021-03-12 16:44:19

  Stream is the new file

  随着5G 网络、容器云、高性能存储硬件水平的不断提高，流处理正在拥有越来越广泛的市场前景。

  
• 03.12 16:29:24
  发表了文章 2021-03-12 16:29:24

  阿里云贾扬清：大数据和人工智能一体化是必然趋势

  拥抱“融合”是大数据演进的新方向，⼤数据+⼈⼯智能⼀体化是⼤数据发展的必然⽅向，而人工智能是⼤数据业务发展的终极出⼝ 。

  
• 03.12 16:14:22
  发表了文章 2021-03-12 16:14:22

  网易游戏基于 Flink 的流式 ETL 建设

  网易游戏流式 ETL 建设实践及调优经验分享～

  
• 03.12 14:57:39
  发表了文章 2021-03-12 14:57:39

  Flink 必知必会经典课程7：Flink Ecosystems

  本文主要介绍了Flink SQL连接外部系统的原因和原理，介绍了常用的Flink SQL Connector，包括Kafka Connector、Elasticsearch Connector、FileSystem Connector、Hive Connector等等。

  
• 03.11 15:53:29
  发表了文章 2021-03-11 15:53:29

  Flink SQL CDC 实践以及一致性分析

  本文就Flink SQL CDC+JDBC Connector数据同步方案进行了实践，并从理论和实践分析了端到端的一致性保证。

  
• 03.11 14:22:52
  发表了文章 2021-03-11 14:22:52

  免费下载！Apache Flink 系列电子书之开源大数据前瞻与应用实战

  埋头苦干的同时，也需要抬头看看最新的技术风向。

  
• 03.11 10:54:15
  发表了文章 2021-03-11 10:54:15

  使用 Flink 前需要知道的 10 个『陷阱』

  Flink 实用避坑指南。

  
• 03.08 10:56:45
  发表了文章 2021-03-08 10:56:45

  大数据+AI Meetup 2021 首站！9位大佬解读向量搜索技术在多维场景下的应用

  3月20日，阿里云开发者社区联合阿里云计算平台事业部、达摩院共同举办的 BIGDATA + AI Meetup · 北京站向量检索专场即将重磅开启！

  
• 03.04 14:56:56
  发表了文章 2021-03-04 14:56:56

  迄今为止最好用的Flink SQL教程：Flink SQL Cookbook on Zeppelin

  无需写任何代码，只要照着这篇文章轻松几步就能跑各种类型的 Flink SQL 语句。

  
• 03.03 15:11:28
  发表了文章 2021-03-03 15:11:28

  快手基于 Flink 的持续优化与实践

  快手基于 Flink 的持续优化与实践的介绍。