回顾 | Kafka x Flink Meetup 与世界人工智能大会大数据 AI 专场精彩回顾(附PPT下载)

本文涉及的产品
实时计算 Flink 版,5000CU*H 3个月
简介: 8 月最后一天,由 Apache Kafka 与 Apache Flink 联合举办的 Meetup 深圳站圆满落幕,现场站无虚席,来自 Confluent 、中国农业银行 、虎牙直播、数见科技以及阿里巴巴的五位技术专家带来了丰富精彩的分享,全场干货满满!

8 月最后一天,由 Apache Kafka 与 Apache Flink 联合举办的 Meetup 深圳站圆满落幕,现场站无虚席,来自 Confluent 、中国农业银行 、虎牙直播、数见科技以及阿里巴巴的五位技术专家带来了丰富精彩的分享,全场干货满满!

合照 .jpg

PPT下载链接:
https://files.alicdn.com/tpsservice/baeb4c569c57f04a38e4e9cd616ec37d.zip

《Apache Kafka 在现代数据驱动架构中的角色》

张子斌.jpg

张子斌
Confluent 大中华区资深系统工程师

Confluent 的张子斌老师现场分享了 Kafka 在架构、生态系统中的作用和优势,以及用于解决组织在管理数据流和数据可用性方面面临的挑战的几种设计模式。

  • Apache Kafka 是一个流媒体平台
  • Kafka 技术回顾
  • Apache Kafka 解决了什么问题
  • Apache Kafka 的架构模式

《Apache Flink 在中国农业银行的探索和实践》

2.jpg

侯鑫磊
中国农业银行研发中心高级工程师

Apache Flink 作为新一代批流计算引擎,在金融科技应用越来越广泛,中国农业银行的侯鑫磊老师本次分享主要介绍了农业银行以 Apache Flink 作为混合计算引擎,在反欺诈、系统异常检测、实时数据统计等应用中进行的探索和实践。

  • 背景介绍
  • 应用效果
  • 实践分享
  • 思考展望

《混合云、边缘计算下的实时计算平台设计》

3.jpg

陈仕明
虎牙数据平台负责人

虎牙的陈仕明老师本次分享介绍了在混合云、边缘计算等新的基础资源框架之下实时计算平台如何能够更好的服务于业务,并结合虎牙的实践与在座同学进行探讨。

  • 实时计算在虎牙的发展
  • 当前面临的挑战
  • 解决的方式及效果
  • 未来展望

《构建批流一体数据集成平台的一致性语义保证》

4.jpg

陈肃
博士,北京数见科技有限公司(DataPipeline)CTO

数见科技的陈肃博士本次分享介绍了 Kafka Connect 作为一个被广泛应用的数据集成框架如何进一步实现较为通用的精确一次(exactly once)语义保证。

  • 批流一体架构
  • DP的解决之道
  • 一致性语义保证
  • 问题和思考

《Flink SQL 1.9.0 技术内幕和最佳实践》

5.jpg

伍翀(云邪)
阿里巴巴 SQL 引擎技术专家

阿里巴巴的伍翀老师本次分享聚焦近期发布的 Flink 1.9 版本,以最新发布的 Flink SQL 为切入点,重点分享 Flink SQL 在 1.9 版本的新增功能,并结合 Demo 演示介绍最佳实践的姿势和调优经验。

  • Flink 1.9.0 的里程碑意义
  • 新架构和新功能
  • 如何使⽤用 Blink Planner
  • 性能优化指南
  • Demo

与深圳 Meetup 同步进行世界人工智能大会开发者日子单元 —— 大数据 + AI 生态专场也在魔都圆满落幕,现场来自阿里云机器学习平台资深技术专家李永、intel 高级软件工程师黄凯、中科院博士申毅杰、阿里巴巴人工智能高级技术专家肖允锋、阿里巴巴高级产品专家陈守元分享了大数据与 AI 的行业动态与先进技术。

《阿里云机器学习PAI核心技术与服务》
李永,阿里云机器学习平台资深技术专家
《利用Analytics Zoo构建统一的大数据分析和AI流水线》
黄凯,Intel高级软件工程师
《基于 Apache Pulsar 和 Apache Flink 进行批流一体的弹性数据处理》
申毅杰,中国科学院计算技术研究所博士生
《人工智能的大数据检索》
肖允锋,阿里巴巴高级技术专家
《Flink:下一代开源大数据引擎》
陈守元,阿里巴巴高级产品专家

PPT下载:

https://files.alicdn.com/tpsservice/58ceee0a32f325a276862861e90b862f.zip

感谢深圳、上海同学们的支持!Apache Flink 社区将一如既往地为大家呈现更多技术干货,9 月 7 日,Apache Flink Meetup · 上海站再见!


▼ Apache Flink 社区推荐 ▼

Apache Flink 及大数据领域顶级盛会 Flink Forward Asia 2019 重磅开启,目前正在征集议题,限量早鸟票优惠ing。了解 Flink Forward Asia 2019 的更多信息,请查看:

https://developer.aliyun.com/special/ffa2019

首届 Apache Flink 极客挑战赛重磅开启,聚焦机器学习与性能优化两大热门领域,40万奖金等你拿,加入挑战请点击:

https://tianchi.aliyun.com/markets/tianchi/flink2019

目录
打赏
0
0
0
0
36032
分享
相关文章
告别数据混乱:瓴羊Dataphin 通过AI+标准让企业数据“活”起来 | 【瓴羊数据荟】数据MeetUp第四期
AI技术的快速发展促使企业重新审视数据治理的重要性。当前,企业在数据治理中常因指标口径不统一、数据血缘不透明等问题陷入困境。阿里云智能集团瓴羊高级技术专家周鑫提出,以数据标准为核心贯穿数据全生命周期,可有效解决治理难题。
151 15
告别数据混乱:瓴羊Dataphin 通过AI+标准让企业数据“活”起来 | 【瓴羊数据荟】数据MeetUp第四期
基于 Flink CDC YAML 的 MySQL 到 Kafka 流式数据集成
本教程展示如何使用Flink CDC YAML快速构建从MySQL到Kafka的流式数据集成作业,涵盖整库同步和表结构变更同步。无需编写Java/Scala代码或安装IDE,所有操作在Flink CDC CLI中完成。首先准备Flink Standalone集群和Docker环境(包括MySQL、Kafka和Zookeeper),然后通过配置YAML文件提交任务,实现数据同步。教程还介绍了路由变更、写入多个分区、输出格式设置及上游表名到下游Topic的映射等功能,并提供详细的命令和示例。最后,包含环境清理步骤以确保资源释放。
371 2
基于 Flink CDC YAML 的 MySQL 到 Kafka 流式数据集成
docker环境安装kafka/Flink/clickhouse镜像
通过上述步骤和示例,您可以系统地了解如何使用Docker Compose安装和配置Kafka、Flink和ClickHouse,并进行基本的验证操作。希望这些内容对您的学习和工作有所帮助。
308 28
瓴羊Dataphin:AI驱动的数据治理——千里之行,始于标准 |【瓴羊数据荟】数据MeetUp第三期
数据标准是数据治理的核心抓手,通过梳理数据标准可以有效提升数据质量。瓴羊Dataphin平台利用AI技术简化数据治理流程,实现自动化的数据标准建立、质量规则构建和特征识别,助力企业在大模型时代高效治理数据,推动数据真正为业务服务。
490 28
瓴羊Dataphin:AI驱动的数据治理——千里之行,始于标准 |【瓴羊数据荟】数据MeetUp第三期
【瓴羊数据荟】 共话AI×Data的企业应用进化,瓴羊「数据荟」MeetUp城市行上海场顺利收官!
瓴羊「数据荟」Meet Up城市行系列活动第四期活动将于3月7日在上海举办,由中国信息通信研究院与阿里巴巴瓴羊专家联袂呈现,共同探讨AI时代的数据应用实践与企业智能DNA的革命性重构。
150 0
【瓴羊数据荟】  共话AI×Data的企业应用进化,瓴羊「数据荟」MeetUp城市行上海场顺利收官!
云原生 Meetup,AI 应用工程化专场·广州站
欢迎莅临广州市海珠区鼎新路 88 号广州阿里中心,O-N-10-02 春秋书院。报名成功后,您将在活动前一周收到短信通知。
秒级灾备恢复:Kafka 2025 AI自愈集群下载及跨云Topic迁移终极教程
Apache Kafka 2025作为企业级实时数据中枢,实现五大革新:量子安全传输(CRYSTALS-Kyber抗量子加密算法)、联邦学习总线(支持TensorFlow Federated/Horizontal FL框架)、AI自愈集群(MTTR缩短至30秒内)、多模态数据处理(原生支持视频流、3D点云等)和跨云弹性扩展(AWS/GCP/Azure间自动迁移)。平台采用混合云基础设施矩阵与软件依赖拓扑设计,提供智能部署架构。安装流程涵盖抗量子安装包获取、量子密钥配置及联邦学习总线设置。
【瓴羊数据荟】 Data x AI :大模型时代的数据治理创新实践 | 瓴羊数据Meet Up城市行第三期
第三期瓴羊数据Meetup 将于2025年1月3日在线上与大家见面,共同探讨AI时代的数据治理实践。
411 10
【瓴羊数据荟】 Data x  AI :大模型时代的数据治理创新实践 | 瓴羊数据Meet Up城市行第三期
从湖仓分离到湖仓一体,四川航空基于 SelectDB 的多源数据联邦分析实践
川航选择引入 SelectDB 建设湖仓一体大数据分析引擎,取得了数据导入效率提升 3-6 倍,查询分析性能提升 10-18 倍、实时性提升至 5 秒内等收益。
从湖仓分离到湖仓一体,四川航空基于 SelectDB 的多源数据联邦分析实践

相关产品

  • 实时计算 Flink版
  • AI助理

    你好,我是AI助理

    可以解答问题、推荐解决方案等