开发者社区> 大数据与机器学习> 实时计算 Flink

实时计算 Flink

关注

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

1
今日
22626
内容
32
活动
200561
关注
|
存储 分布式计算 运维
|

Flink 遇见 Apache Celeborn:统一的数据 Shuffle 服务

最新发布的 0.3.0 版本新增对 Flink 批作业 Shuffle 的支持,从此 Flink、Spark 可以同时使用统一的数据 Shuffle 服务,更大程度节省资源、降低运维成本。

6233 10
|
存储 消息中间件 SQL
|

Flink CDC & MongoDB 联合实时数仓的探索实践

XTransfer 技术专家, Flink CDC Maintainer 孙家宝,在 Flink Forward Asia 2022 数据集成专场的分享。

1443 0
|
存储 机器学习/深度学习 负载均衡
|

使用梯度提升树算法进行CTR预测

使用梯度提升树算法进行CTR预测

480 0
|
存储 机器学习/深度学习 负载均衡
|

使用Swing算法实现商品推荐

使用Swing算法实现商品推荐

5762 3
|
传感器 存储 数据采集
|

Flink 在新能源场站运维的应用

中南电力设计院工程师、注册测绘师姚远,在 Flink Forward Asia 2022 行业案例专场的分享。

679 2
|
SQL 消息中间件 运维
|

联通 Flink 实时计算平台化运维实践

联通数科实时计算团队负责人、Apache StreamPark Committer 穆纯进在 Flink Forward Asia 2022 平台建设专场的分享

5426 6
|
SQL 数据采集 存储
|

Hive SQL 迁移 Flink SQL 在快手的实践

快手数据架构工程师张芒,阿里云工程师刘大龙,在 Flink Forward Asia 2022 生产实践专场的分享。

831 1
|
SQL 存储 消息中间件
|

Flink+StarRocks 实时数据分析新范式

StarRocks 社区技术布道师谢寅,在 Flink Forward Asia 2022 实时湖仓的分享。

2348 2
|
存储 SQL 分布式计算
|

活动预告|7月29日 Streaming Lakehouse Meetup·北京站

Streaming Lakehouse 首个 Meetup 来啦! 7 月 29 日 | 北京 | 线下,来一场 Streaming Lakehouse 实时数据湖的体验之旅!

918 0
|
数据挖掘 关系型数据库 MySQL
|

Flink-Learning 实战营在升级!更多精美好礼等你来!

加入升级版 Flink-Learning 实战营,动手体验真实有趣的实战场景。

707 0
|
存储 Prometheus 监控
|

Flink-Learning 训练营课前预习

Flink-Learning 训练营课前预习

1447 0
|
存储 Prometheus 运维
|

使用 Prometheus 为 Flink 搭建可观测体系

使用 Prometheus 为 Flink 搭建可观测体系

768 0
|
SQL 关系型数据库 MySQL
|

实现淘宝母婴订单实时查询和可视化|Flink-Learning实战营

本场景将以 阿里云实时计算Flink版为基础,使用 Flink 自带的 MySQL Connector 连接 RDS 云数据库实例、Elasticsearch Connector 连接 Elasticsearch 检索分析服务实例,并以一个淘宝母婴订单实时查询的例子尝试上手 Connector 的数据捕获、数据写入等功能。

627 3
|
SQL 关系型数据库 MySQL
|

Flink CDC 2.4 正式发布,新增 Vitess 数据源,PostgreSQL 和 SQL Server CDC 连接器支持增量快照,升级 Debezium 版本

Flink CDC 2.4 正式发布,新增 Vitess 数据源,PostgreSQL 和 SQL Server CDC 连接器支持增量快照,升级 Debezium 版本

1544 1
|
SQL 人工智能 分布式计算
|

如何使用 Flink SQL 探索 GitHub 数据集|Flink-Learning 实战营

想要了解如何使用 Flink 在 GitHub 中发现最热门的项目吗?本实验使用阿里云实时计算 Flink 版内置的 GitHub 公开事件数据集,通过 Flink SQL 实时探索分析 Github 公开数据集中隐藏的彩蛋!

555 1
|
存储 Cloud Native 数据管理
|

喜报:Apache Flink 荣获 2023 年度 SIGMOD 系统奖 !!!

在 6 月 18-23 日召开的 ACM SIGMOD 2023 峰会上,Apache Flink 荣获了本年度的系统奖(Systems Award)。

778 2
|
SQL 关系型数据库 MySQL
|

如何实时统计最近 15 秒的商品销售额|Flink-Learning 实战营

想要了解如何使用 Flink 实时统计最近 15 秒的商品销售额吗?本实验将以阿里云实时计算 Flink 版为基础,使用 Flink 自带的 MySQL Connector 连接 RDS 云数据库实例,并以实时商品销售数据统计的例子,引导开发者上手 Connector 的数据捕获、数据写入等功能。

1010 2
|
存储 消息中间件 NoSQL
|

中原银行 OLAP 架构实时化演进

中原银行数据信息部杜威科,在 Flink Forward Asia 2022 行业案例专场的分享。

585 2
|
SQL 运维 关系型数据库
|

实现淘宝母婴订单实时查询和实时大屏实验手册|Flink-Learning 实战营

加入 Flink-Learning 实战营,动手体验真实有趣的实战场景。只需 2 小时,让您变身 Flink 实战派。实战营采取了 Flink 专家在线授课,专属社群答疑,小松鼠助教全程陪伴的学习模式。

12027 2
|
SQL 人工智能 分布式计算
|

使用 Flink 实时发现最热 Github 项目实验手册|Flink-Learning 实战营

加入 Flink-Learning 实战营,动手体验真实有趣的实战场景。只需 2 小时,让您变身 Flink 实战派。实战营采取了 Flink 专家在线授课,专属社群答疑,小松鼠助教全程陪伴的学习模式。

2136 1
|
SQL 存储 关系型数据库
|

5 分钟上手 Flink MySQL 连接器实验手册|Flink-Learning 实战营

加入 Flink-Learning 实战营,动手体验真实有趣的实战场景。只需 2 小时,让您变身 Flink 实战派。实战营采取了 Flink 专家在线授课,专属社群答疑,小松鼠助教全程陪伴的学习模式。

2488 2
|
数据挖掘 关系型数据库 MySQL
|

只需 2 小时,变身 Flink 实战派:Flink-Learning实战营火热报名中

加入 Flink-Learning 实战营,动手体验真实有趣的实战场景。

461 0
|
SQL 存储 分布式计算
|

Flink 流批一体在 Shopee 的大规模实践

Shopee 研发专家李明昆在 Flink Forward Asia 2022 流批一体专场的分享。

10438 0
|
存储 数据采集 消息中间件
|

美团买菜基于 Flink 的实时数仓建设

美团买菜实时数仓技术负责人严书,在 Flink Forward Asia 2022 实时湖仓专场的分享。

7264 0
|
机器学习/深度学习 运维 监控
|

揭秘阿里云 Flink 智能诊断利器——Flink Job Advisor

阿里云实时计算 Flink 作为一款专业级别的高性能实时大数据处理系统,它在各种业务场景中都发挥了关键的作用。丰富而复杂的上下游系统让它能够支撑实时数仓、实时风控、实时机器学习等多样化的应用场景。然而,随着系统的复杂性增加,用户在日常使用中往往需要面临诸如复杂的数据开发报错分析、任务运行报错处理、任务运行调优等疑难问题。

4672 1
|
存储 分布式计算 NoSQL
|

活动预告|6月15 日 Apache Paimon Meetup,深入解读 Apache Paimon 0.4.0 !

深入解读 Apache Paimon 0.4.0 Meetup,6月15日|线上活动,敬请期待!

1161 0
|
存储 消息中间件 SQL
|

快手 Flink 的稳定性和功能性扩展

快手技术专家刘建刚,在 Flink Forward Asia 2022 生产实践专场的分享。

7250 3
|
SQL 存储 消息中间件
|

小米基于 Flink 的实时数仓建设实践

本次分享围绕小米在实时数仓方面的探索与实践展开,主要涉及:Flink+Iceberg 实时数仓架构升级,稳定性与实时性优化;基于当前 Flink 实时数仓的不确定性问题,介绍 Merge into 功能和算子级状态清理的解决方案。

8230 0
|
Apache 流计算
|

Flink CEP 在抖音电商的业务实践|电商行业实践专栏上线

Flink-learning 学训平台和电商行业实践专栏来啦!

6567 0
|
Shell
|

自动统计出差费用-shell 脚本自动统计

计算车费,餐补,住宿补。并且转换金额大写

130 0
|
存储 分布式计算 算法
|

基于 Log 的通用增量 Checkpoint

本文将从 Checkpoint 的性能优化历程出发,介绍 ChangelogStateBackend 的基本机制、应用场景和未来规划,同时介绍最新版本在 State 上的一些优化工作。

7648 2
|
存储 Kubernetes Cloud Native
|

Hybrid Shuffle 测试分析和使用建议

本文将基于测试结果详细分析 Hybrid Shuffle 的优势场景,并基于我们的经验给出一些使用建议。

5016 0
|
人工智能 搜索推荐
|

瑞云科技助力番职院打造虚拟数字人,探索职业教育创新之路

3月24-25日,教育部高等学校科学研究发展中心主办、广州番禺职业技术学院承办的2022-2023年职业教育示范性虚拟仿真实训基地建设工作推进会在中国广州举行。会议期间,瑞云科技作为校企合作代表受邀前往番职院公共虚拟仿真实训基地里的校企合作区域,瑞云科技旗下的3DCAT实时云渲染进行了广州番禺职业技术学院(下文简称“番职院”)虚拟数字人合作项目的展示。

272 0
|
人工智能 运维 搜索推荐
|

电商行业实践专栏上线|阿里巴巴风控实战如何解决大规模风控的技术难点?

Flink-learning 学训平台第 4 期课程——电商行业实践专栏上线啦!

903 0
|
机器学习/深度学习 数据采集 人工智能
|

《Apache Flink 案例集(2022版)》——卷首语

《Apache Flink 案例集(2022版)》——卷首语

461 0
|
SQL 消息中间件 搜索推荐
|

《Apache Flink 案例集(2022版)》——1.数据集成——小米-Flink 流批一体在小米的实践

《Apache Flink 案例集(2022版)》——1.数据集成——小米-Flink 流批一体在小米的实践

622 0
|
SQL 调度 Apache
|

《Apache Flink 案例集(2022版)》——1.数据集成——小米-Flink 流批一体在小米的实践(2)

《Apache Flink 案例集(2022版)》——1.数据集成——小米-Flink 流批一体在小米的实践(2)

480 0
|
消息中间件 SQL canal
|

《Apache Flink 案例集(2022版)》——1.数据集成——小米-Flink 流批一体在小米的实践(3)

《Apache Flink 案例集(2022版)》——1.数据集成——小米-Flink 流批一体在小米的实践(3)

452 0
|
消息中间件 SQL canal
|

《Apache Flink 案例集(2022版)》——1.数据集成——小米-Flink 流批一体在小米的实践(3)

《Apache Flink 案例集(2022版)》——1.数据集成——小米-Flink 流批一体在小米的实践(3)

484 0
|
消息中间件 SQL 存储
|

《Apache Flink 案例集(2022版)》——1.数据集成——伴鱼-伴鱼基于 Flink 构建数据集成平台的设计与实现(1)

《《Apache Flink 案例集(2022版)》——1.数据集成——伴鱼-伴鱼基于 Flink 构建数据集成平台的设计与实现(1)

310 0
|
SQL 消息中间件 Kafka
|

《Apache Flink 案例集(2022版)》——1.数据集成——伴鱼-伴鱼基于 Flink 构建数据集成平台的设计与实现(2)

《Apache Flink 案例集(2022版)》——1.数据集成——伴鱼-伴鱼基于 Flink 构建数据集成平台的设计与实现(2)

332 0
|
SQL 消息中间件 算法
|

《Apache Flink 案例集(2022版)》——1.数据集成——伴鱼-伴鱼基于 Flink 构建数据集成平台的设计与实现(3)

《Apache Flink 案例集(2022版)》——1.数据集成——伴鱼-伴鱼基于 Flink 构建数据集成平台的设计与实现(3)

298 0
|
消息中间件 SQL 存储
|

《Apache Flink 案例集(2022版)》——1.数据集成——37手游-基于 Flink CDC + Hudi 湖仓一体方案实践

《Apache Flink 案例集(2022版)》——1.数据集成——37手游-基于 Flink CDC + Hudi 湖仓一体方案实践

470 0
|
消息中间件 数据采集 NoSQL
|

《Apache Flink 案例集(2022版)》——1.数据集成——XTransfer-基Flink MongoDB CDC 在 XTransfer 的生产实践(上)

《Apache Flink 案例集(2022版)》——1.数据集成——XTransfer-基Flink MongoDB CDC 在 XTransfer 的生产实践(上)

331 0
|
消息中间件 数据采集 NoSQL
|

《Apache Flink 案例集(2022版)》——1.数据集成——XTransfer-基Flink MongoDB CDC 在 XTransfer 的生产实践(上)

《Apache Flink 案例集(2022版)》——1.数据集成——XTransfer-基Flink MongoDB CDC 在 XTransfer 的生产实践(上)

255 0
|
SQL 并行计算 NoSQL
|

《Apache Flink 案例集(2022版)》——1.数据集成——XTransfer-基Flink MongoDB CDC 在 XTransfer 的生产实践(下)

《Apache Flink 案例集(2022版)》——1.数据集成——XTransfer-基Flink MongoDB CDC 在 XTransfer 的生产实践(下)

333 0
|
分布式计算 监控 前端开发
|

《Apache Flink 案例集(2022版)》——2.数据分析——网易互娱-基于Flink 的支付环境全关联分析实践(上)

《Apache Flink 案例集(2022版)》——2.数据分析——网易互娱-基于Flink 的支付环境全关联分析实践(上)

269 0
|
运维 Kubernetes 数据可视化
|

《Apache Flink 案例集(2022版)》——2.数据分析——网易互娱-基于Flink 的支付环境全关联分析实践(下)

《Apache Flink 案例集(2022版)》——2.数据分析——网易互娱-基于Flink 的支付环境全关联分析实践(下)

219 0
|
SQL 运维 数据挖掘
|

《Apache Flink 案例集(2022版)》——2.数据分析——快手-Flink SQL 在快手的扩展和实践(1)

《Apache Flink 案例集(2022版)》——2.数据分析——快手-Flink SQL 在快手的扩展和实践(1)

387 0
|
SQL 数据挖掘 Apache
|

《Apache Flink 案例集(2022版)》——2.数据分析——快手-Flink SQL 在快手的扩展和实践(2)

《Apache Flink 案例集(2022版)》——2.数据分析——快手-Flink SQL 在快手的扩展和实践(2)

407 0
我要发布