《基于Flink+Hologres的全域实时数仓在天猫国际的应用》【1】基于Flink+Hologres的全域实时数仓在天猫国际的应用-F(2)
电子书：
</div>《基于Flink+Hologres的全域实时数仓在天猫国际的应用》电子版地址
2022-09-20
380
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《
阿里云开发者社区用户服务协议》和
《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写
侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介：
【1】基于Flink+Hologres的全域实时数仓在天猫国际的应用-F(2)
目录
相关文章
|
存储
SQL
监控
|
存储
消息中间件
OLAP
基于 Flink+Paimon+Hologres 搭建淘天集团湖仓一体数据链路
本文整理自淘天集团高级数据开发工程师朱奥在Flink Forward Asia 2024的分享，围绕实时数仓优化展开。内容涵盖项目背景、核心策略、解决方案、项目价值及未来计划五部分。通过引入Paimon和Hologres技术，解决当前流批存储不统一、实时数据可见性差等痛点，实现流批一体存储与高效近实时数据加工。项目显著提升了数据时效性和开发运维效率，降低了使用门槛与成本，并规划未来在集团内推广湖仓一体架构，探索更多技术创新场景。
2218
3
6
|
存储
传感器
数据采集
什么是实时数仓？实时数仓又有哪些应用场景？
实时数仓是一种能实现秒级数据更新和分析的系统，适用于电商、金融、物流等需要快速响应的场景。相比传统数仓，它具备更高的时效性和并发处理能力，能够帮助企业及时捕捉业务动态，提升决策效率。本文详细解析了其实现架构与核心特点，并结合实际案例说明其应用价值。
1514
9
9
|
SQL
DataWorks
关系型数据库
DataWorks+Hologres：打造企业级实时数仓与高效OLAP分析平台
本方案基于阿里云DataWorks与实时数仓Hologres，实现数据库RDS数据实时同步至Hologres，并通过Hologres高性能OLAP分析能力，完成一站式实时数据分析。DataWorks提供全链路数据集成与治理，Hologres支持实时写入与极速查询，二者深度融合构建离在线一体化数仓，助力企业加速数字化升级。
823
3
3
|
SQL
消息中间件
Kafka
Flink+Paimon+Hologres，面向未来的一体化实时湖仓平台架构设计
本文介绍了阿里云实时数仓Hologres负责人姜伟华在Flink Forward Asia 2024上的分享，涵盖实时数仓的发展历程、从实时数仓到实时湖仓的演进，以及总结。文章通过三代实时数仓架构的演变，详细解析了Lambda架构、Kafka实时数仓分层+OLAP、Hologres实时数仓分层复用等方案，并探讨了未来从实时数仓到实时湖仓的演进方向。最后，结合实际案例和Demo展示了Hologres + Flink + Paimon在实时湖仓中的应用，帮助用户根据业务需求选择合适的方案。
2173
20
21
|
存储
运维
监控
阿里妈妈基于 Flink+Paimon 的 Lakehouse 应用实践
本文总结了阿里妈妈数据技术专家陈亮在Flink Forward Asia 2024大会上的分享，围绕广告业务背景、架构设计及湖仓方案演进展开。内容涵盖广告生态运作、实时数仓挑战与优化，以及基于Paimon的湖仓方案优势。通过分层设计与技术优化，实现业务交付周期缩短30%以上，资源开销降低40%，并大幅提升系统稳定性和运营效率。文章还介绍了阿里云实时计算Flink版的免费试用活动，助力企业探索实时计算与湖仓一体化解决方案。
1667
3
4
|
SQL
监控
关系型数据库
用友畅捷通在Flink上构建实时数仓、挑战与最佳实践
本文整理自用友畅捷通数据架构师王龙强在FFA2024上的分享，介绍了公司在Flink上构建实时数仓的经验。内容涵盖业务背景、数仓建设、当前挑战、最佳实践和未来展望。随着数据量增长，公司面临数据库性能瓶颈及实时数据处理需求，通过引入Flink技术逐步解决了数据同步、链路稳定性和表结构差异等问题，并计划在未来进一步优化链路稳定性、探索湖仓一体架构以及结合AI技术推进数据资源高效利用。
1083
25
26
|
存储
SQL
Java
Flink CDC + Hologres高性能数据同步优化实践
本文整理自阿里云高级技术专家胡一博老师在Flink Forward Asia 2024数据集成（二）专场的分享，主要内容包括：1. Hologres介绍：实时数据仓库，支持毫秒级写入和高QPS查询；2. 写入优化：通过改进缓冲队列、连接池和COPY模式提高吞吐量和降低延迟；3. 消费优化：优化离线场景和分区表的消费逻辑，提升性能和资源利用率；4. 未来展望：进一步简化用户操作，支持更多DDL操作及全增量消费。Hologres 3.0全新升级为一体化实时湖仓平台，提供多项新功能并降低使用成本。
1118
1
1
|
SQL
弹性计算
DataWorks
|
SQL
消息中间件
Serverless
热门文章
最新文章
1
基于 Flink 的实时数仓在曹操出行运营中的应用
2
实时数仓入门训练营：实时计算Flink版总体介绍
3
Hologres揭秘：高性能原生加速MaxCompute核心原理
4
畅捷通基于Flink的实时数仓落地实践
5
小米基于 Flink 的实时数仓建设实践
6
数据建设与治理丨Dataphin中如何进行Hologres开发
7
Hologres RoaringBitmap在Lazada选品平台的最佳实践
8
云上玩转Qwen3系列之三：PAI-LangStudio x Hologres构建ChatBI数据分析Agent应用
9
实时数仓Workshop · 广州站 9.15 邀您参加！
10
Hologres × PAI × DeepSeek 搭建 RAG 检索增强对话系统
1
实时计算 Flink 全新升级 - 全栈流处理平台助力实时智能
827
2
云栖实录｜实时计算 Flink 全新升级 - 全栈流处理平台助力实时智能
709
3
Flink Agents 0.1.0 发布公告
879
4
阿里云、Ververica、Confluent 与 LinkedIn 携手推进流式创新，共筑基于 Apache Flink Agents 的智能体 AI 未来
1619
5
零售数据湖的进化之路：滔搏从Lambda架构到阿里云Flink+Paimon统一架构的实战实践
730
6
Flink基于Paimon的实时湖仓解决方案的演进
1366
7
构建高效的实时数据管道：Flink、Kafka、CnosDB 的完美结合
632
8
Flink Agents：基于Apache Flink的事件驱动AI智能体框架
3662
9
淘宝闪购基于Flink&Paimon的Lakehouse生产实践：从实时数仓到湖仓一体化的演进之路
1888
10
从嵌入式状态管理到云原生架构：Apache Flink 的演进与下一代增量计算范式
776