开发者社区> 大数据与机器学习> 实时计算 Flink

实时计算 Flink

关注

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

1
今日
22626
内容
32
活动
200561
关注
|
SQL 存储 消息中间件
|

流批一体的近实时数仓的思考与设计

欢迎大家多分享具体实践,一起共筑新的数据实践方式。

10197 3
|
SQL 存储 消息中间件
|

B 站构建实时数据湖的探索和实践

bilibili 大数据实时团队资深开发工程师周晖栋,在 Flink Forward Asia 2022 实时湖仓专场的分享。

8623 0
|
数据挖掘 大数据 Apache
|

行业实践专栏上线|互娱领域专家解读 Flink 企业应用实践

Flink-learning 学训平台第 3 期课程——互娱行业实践专栏上线啦!

590 0
|
人工智能 数据可视化 大数据
|

专访惠众科技|元宇宙应用如何借助3DCAT实时云渲染实现流畅大并发呈现?

惠众科技是一家致力于元宇宙创新应用的技术开发服务的高新科技企业及智慧城市、大数据、虚拟现实仿真技术解决方案的专业服务商。我们有幸采访到了惠众科技的联合创始人钟凯,来听听惠众科技如何在政府、企业和消费者三个环节部署自己的元宇宙内容的?为何选择了使用3DCAT实时云渲染?以及AIGC会如何赋能元宇宙内容创作?

286 0
|
SQL 测试技术 Apache
|

Flink SQL 的数据脱敏解决方案

Flink SQL 的数据脱敏解决方案,支持面向用户级别的数据脱敏访问控制,即特定用户只能访问到脱敏后的数据。

7787 0
|
SQL 存储 运维
|

蚂蚁实时低代码研发和流批一体的应用实践

蚂蚁实时数仓架构师马年圣,在 Flink Forward Asia 2022 流批一体专场的分享。

9641 1
|
SQL 机器学习/深度学习 算法
|

日常节省 30%计算资源:阿里云实时计算 Flink 自动调优实践

Flink 流作业的资源调优一直是业界难题,该 Topic 主要介绍阿里云上 Flink 资源调优的一些实践。

8150 0
|
SQL 存储 消息中间件
|

Hive SQL on Flink 构建流批一体引擎

阿里巴巴开发工程师罗宇侠&方盛凯,在 Flink Forward Asia 2022 流批一体专场的分享。

19340 3
|
API Apache 流计算
|

Flink 2.0 启航,开启全新篇章

欢迎大家参加关于 Flink 2.0 的愿景、功能、时间表、流程、路线图等方面的讨论!

26795 0
|
SQL 存储 缓存
|

最佳实践|如何写出简单高效的 Flink SQL?

通过几个经典案例介绍 Flink SQL 的最佳实践:如何写出简单高效的 Flink SQL,哪些 SQL 是 BAD SQL。帮助大家更好地的认识 Flink SQL。

46013 0
|
弹性计算 并行计算 数据库
|

飞天加速计划学习感想

我是一名大三计算机科学与技术专业在读学生,在数据库这门课上,老师向我们介绍了飞天加速计划这项有意义的课程,并给我们分配了账号,让我们珍惜难得的学习机会。 使用ECS的过程是一个全新的开始,就相当于重新使用一种模式,我们习惯了应用软件类型的操作方式,因此这种命令行的操作方法还适应了一些时间。

175 0
|
存储 人工智能 安全
|

重塑元宇宙体验!3DCAT元宇宙实时云渲染解决方案来了

元宇宙作为人工智能、云计算和数字孪生等前沿技术的结合体,近年来越发受到各大企业重视。元宇宙的应用场景层出不穷,不仅包括营销推广场景,还有品牌活动和电商销售,能有效提升品宣和商业转化效果。元宇宙也具有极大的建设价值,从品牌文化展示到3D场景化联动再到互动社群运营,参与元宇宙建设可以占据元宇宙的发展潮流,更好地赋能品牌营销。

399 0
|
机器学习/深度学习 数据采集 人工智能
|

Apache Flink ML 2.2.0 发布公告

Apache Flink 社区很荣幸地宣布 Apache Flink ML 2.2.0 版本正式发布!

774 0
|
SQL 消息中间件 canal
|

Flink CDC 在易车的应用实践

易车数据平台负责人王林红,在 Flink Forward Asia 2022 数据集成专场的分享。

877 1
|
消息中间件 存储 NoSQL
|

基于 Flink CDC 的现代数据栈实践

阿里云技术专家,Apache Flink PMC Member & Committer, Flink CDC Maintainer 徐榜江和阿里云高级研发工程师,Apache Flink Contributor & Flink CDC Maintainer 阮航,在 Flink Forward Asia 2022 数据集成专场的分享。

1645 0
|
机器学习/深度学习 数据挖掘 数据处理
|

海量数据实时分析引擎 Apache Flink

当系统出现大量或者重大的错误却不被人感知,将会对业务产生影响,从而导致资产损失。当竞争对手实施了新战术,却无法及时感知,跟不上竞争对手的节奏,总是追着对方尾巴走。当要做决策的时候,海量的业务数据增长却无法实时看到聚合结果,决策总是凭借过往经验或者过时的数据分析之上。

1177 1
|
SQL 存储 数据采集
|

Flink CDC 在京东的探索与实践

京东资深技术专家韩飞,在 Flink Forward Asia 2022 数据集成专场的分享。

630 0
|
SQL 存储 Kubernetes
|

FLINK 在蚂蚁大规模金融场景的平台建设

蚂蚁集团高级技术专家、蚂蚁集团流计算平台负责人李志刚,在 Flink Forward Asia 2022 平台建设专场的分享。

894 1
|
SQL 存储 消息中间件
|

快手基于 Apache Flink 的实时数仓建设实践

快手实时数据开发工程师冯立,快手实时数据开发工程师羊艺超,在 Flink Forward Asia 2022 实时湖仓专场的分享。

1912 2
|
SQL 消息中间件 存储
|

Flink SQL 在美团实时数仓中的增强与实践

美团数据系统研发工程师董剑辉&美团数据系统研发工程师张彬,在 Flink Forward Asia 2022 平台建设专场的分享。

1388 0
|
消息中间件 Oracle NoSQL
|

如何实现对 Oracle 的实时数据捕获和性能调优|Flink CDC 专题

Flink-learning 学训平台和 Flink CDC 专题课程来啦!

517 0
|
资源调度 运维 Kubernetes
|

字节跳动 Flink 大规模云原生化实践

字节跳动基础架构工程师刘畅,在 Flink Forward Asia 2022 生产实践专场的分享。

790 0
|
消息中间件 存储 关系型数据库
|

Flink 流批一体方案在数禾的实践

上海数⽲信息科技有限公司⼤数据架构师杨涵冰,在 Flink Forward Asia 2022 流批一体专场的分享。

8624 2
|
消息中间件 Oracle NoSQL
|

Flink CDC 专题首发|每天 10 分钟,解锁新一代数据集成框架

Flink-learning 学训平台和 Flink CDC 专题课程来啦!

828 0
|
SQL Web App开发 算法
|

官宣|Apache Flink 1.17 发布公告

Apache Flink PMC(项目管理委员)已宣布发布 Apache Flink 1.17.0。Apache Flink 是领先的流处理标准,流批统一的数据处理概念在越来越多的公司中得到认可。

2353 0
|
存储 机器学习/深度学习 SQL
|

Airwallex 基于 Flink 打造实时风控系统

随着企业规模的增长,用户数量的提升,我们认识到单纯的人工审核和规则引擎无法满足业务需求,所以引入机器学习对风险等级进行动态评估成为了风控引擎进化的必然趋势。

922 0
|
存储 SQL 运维
|

流批一体在 AI 核心电商领域的探索与实践

搜索、推荐、广告等核心电商领域,涉及海量的电商、用户行为等数据,需要支持大规模深度模型参数更新,是一个典型的批次/实时计算结合的场景,阿里智能引擎事业部基于大数据存储和计算引擎技术(Flink),针对复杂业务特点,简化用户 ETL 开发流程。

1484 1
|
存储 SQL 消息中间件
|

Flink 在中泰证券的实践与应用

中泰证券大数据中心实时计算平台架构师连序全,在 Flink Forward Asia 2022 行业案例专场的分享。

622 0
|
SQL 机器学习/深度学习 JSON
|

基于 Apache Flink 的实时计算数据流业务引擎在京东零售的实践和落地

京东零售-技术研发与数据中心张颖&闫莉刚在 ApacheCon Asia 2022 的分享。

1108 0
|
SQL 存储 消息中间件
|

Apache Flink X Apache Doris 构建极速易用的实时数仓架构

在本次分享中,将为大家介绍如何基于 Apache Doris 和 Apache Flink 构建极速易用的实时数仓架构。

4265 0
|
存储 消息中间件 Kafka
|

高效稳定的通用增量 Checkpoint 详解之二:性能分析评估

本文将从理论和实验两个部分详细论述通用增量 Checkpoint 的收益与开销,并分析其适用场景。

1036 0
|
机器学习/深度学习 存储 消息中间件
|

FeatHub:流批一体的实时特征工程平台

本次分享中,将介绍 FeatHub,一个由阿里云自研并开源的实时特征平台。我们将介绍 FeatHub 的架构设计,已经完成的工作,以及近期的发展计划。

4907 0
|
SQL 消息中间件 关系型数据库
|

基于 Flink CDC 的实时同步系统

科杰科技大数据架构师张军,在 FFA 数据集成专场的分享。

1578 0
|
消息中间件 SQL 存储
|

基于 Flink 流计算实现的股票交易实时资产应用

第四届实时计算 Flink 挑战赛最佳实践奖-海克斯科技的项目文章。

1239 0
|
存储 缓存 监控
|

电商 SaaS 全渠道实时数据中台最佳实践

聚水潭数据专家张成玉,聚水潭高级数据工程师应圣楚,在 FFA 2022 行业案例专场的分享。

1182 1
|
SQL 存储 运维
|

如何降低 Flink 开发和运维成本?阿里云实时计算平台建设实践

本次分享主要介绍阿里云实时计算平台从 2.0 基于 Yarn 的架构到 3.0 云原生时代的演进,以及在 3.0 平台上一些核心功能的建设实践,如健康分,智能诊断,细粒度资源,作业探查以及企业级安全的建设等。

37253 3
|
存储 消息中间件 SQL
|

Flink Table Store 0.3 构建流式数仓最佳实践

阿里巴巴高级技术专家,Apache Flink PMC 李劲松(之信),在 FFA 2022 实时湖仓的分享。

2169 0
|
SQL 算法 NoSQL
|

Apache Flink 1.16 功能解读

在本次分享中,将介绍一下 Flink 1.16 的整体情况;然后我们将从三个方面(更稳定易用高性能的 Flink 批处理;持续领先的 Flink 流处理;蓬勃发展的 Flink 生态。)来深入讲解 Flink 1.16 在流批一体的大方向上所做的改进。

1494 0
|
SQL 存储 分布式计算
|

爱奇艺统一实时计算平台建设

为了更好地满足实时业务的需求,实现公司降本增效的目标,爱奇艺大数据团队对实时服务体系进行了系统的整合和优化设计。本次分享将介绍团队基于 Flink 建设统一实时计算平台的经验,以及通过数据湖和 Flink CDC 技术进行架构升级的实践。

725 0
|
存储 SQL 缓存
|

京东物流实时风控实践

京东风控数据产品组架构师周文跃,在 FFA 实时风控专场的分享。

2225 0
|
NoSQL 大数据 Apache
|

Apache Flink 入选 2022 年“科创中国”开源创新榜

Apache Flink 以及 Flink 开源社区重要推动者阿里巴巴,分别入选开源创新榜“开源产品”和“开源机构”。

787 0
|
SQL 存储 消息中间件
|

集度汽车 Flink on native k8s 的应用与实践

在集度汽车实时计算的发展过程中,Flink 起到了至关重要的作用。Flink 的低延迟,高吞吐,支撑着整个公司的实时数据流。

1247 0
|
消息中间件 Kafka Apache
|

Flink CDC+Kafka 加速业务实时化

阿里巴巴开发工程师,Apache Flink Committer 任庆盛,在 9 月 24 日 Apache Flink Meetup 的分享。

23060 1
|
SQL 关系型数据库 测试技术
|

FlinkSQL 的行级权限解决方案及源码

FlinkSQL的行级权限解决方案及源码,支持面向用户级别的行级数据访问控制,即特定用户只能访问授权过的行,隐藏未授权的行数据。此方案是实时领域Flink的解决方案,类似离线数仓Hive中Ranger Row-level Filter方案。

977 0
|
SQL 机器学习/深度学习 分布式计算
|

会议总结 | 首次 Flink Batch 社区开发者会议

2023 年 2 月 8 日 Flink Batch 社区开发者会议会议总结。

585 0
|
存储 消息中间件 SQL
|

Apache Flink 实时计算在美的多业务场景下的应用与实践

美的集团实时数据负责人、资深数据架构师董奇,在 Flink Forward Asia 2022 主会场的分享。

885 0
|
SQL 存储 机器学习/深度学习
|

流批一体架构在快手的实践和思考

快手技术专家、Apache Flink & Apache Calcite Committer 张静,在 FFA 流批一体专场的分享。

1760 0
|
SQL 消息中间件 数据采集
|

基于 Flink 的小米数据集成实践

介绍小米在数据集成领域的思考和实践,以及正在打造的基于 Flink 的数据集成引擎。生产实践环节中,我们将展示部分小米数据集成的实战案例。

1041 0
|
SQL 消息中间件 分布式计算
|

Flink X Hologres 构建企业级 Streaming Warehouse

阿里云 Hologres 负责人姜伟华(果贝),在 FFA 实时湖仓专场的分享。

31652 2
|
SQL 消息中间件 JSON
|

Flink CEP 新特性进展与在实时风控场景的落地

本次分享将会介绍 Flink 社区在 1.16 中对 Flink CEP 所做的增强与优化。

3042 0
我要发布