AI 助理
文档备案控制台
开发者社区 云计算 文章 正文

《基于Flink+Hologres的全域实时数仓在天猫国际的应用》电子版地址

2022-09-20 338
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介： 【1】基于Flink+Hologres的全域实时数仓在天猫国际的应用-F(2)

《基于Flink+Hologres的全域实时数仓在天猫国际的应用》【1】基于Flink+Hologres的全域实时数仓在天猫国际的应用-F(2)

电子书：

屏幕快照 2022-06-17 上午9.58.35.png

                
            </div>
文章标签：
实时数仓 Hologres
实时计算 Flink版
关键词：
实时数仓 Hologres数仓
实时数仓 Hologres应用
实时计算 Flink版Hologres
实时计算 Flink版应用
实时计算 Flink版实时数仓
相关实践学习
基于Hologres轻量实时的高性能OLAP分析
本教程基于GitHub Archive公开数据集，通过DataWorks将GitHub中的项⽬、行为等20多种事件类型数据实时采集至Hologres进行分析，同时使用DataV内置模板，快速搭建实时可视化数据大屏，从开发者、项⽬、编程语⾔等多个维度了解GitHub实时数据变化情况。
auqbllxiu
目录
相关文章
灵杰开发者
|
存储 消息中间件 OLAP
基于 Flink+Paimon+Hologres 搭建淘天集团湖仓一体数据链路
本文整理自淘天集团高级数据开发工程师朱奥在Flink Forward Asia 2024的分享，围绕实时数仓优化展开。内容涵盖项目背景、核心策略、解决方案、项目价值及未来计划五部分。通过引入Paimon和Hologres技术，解决当前流批存储不统一、实时数据可见性差等痛点，实现流批一体存储与高效近实时数据加工。项目显著提升了数据时效性和开发运维效率，降低了使用门槛与成本，并规划未来在集团内推广湖仓一体架构，探索更多技术创新场景。
灵杰开发者
1994 3
基于 Flink+Paimon+Hologres 搭建淘天集团湖仓一体数据链路
阿里云大数据Al技术
|
人工智能 自然语言处理 数据挖掘
云上玩转Qwen3系列之三：PAI-LangStudio x Hologres构建ChatBI数据分析Agent应用
PAI-LangStudio 和 Qwen3 构建基于 MCP 协议的 Hologres ChatBI 智能 Agent 应用，通过将 Agent、MCP Server 等技术和阿里最新的推理模型 Qwen3 编排在一个应用流中，为大模型提供了 MCP+OLAP 的智能数据分析能力，使用自然语言即可实现 OLAP 数据分析的查询效果，减少了幻觉。开发者可以基于该模板进行灵活扩展和二次开发，以满足特定场景的需求。
阿里云大数据Al技术
847 4
游客7wkr3y7oxyt7a
|
11月前
|
存储 传感器 数据采集
什么是实时数仓？实时数仓又有哪些应用场景？
实时数仓是一种能实现秒级数据更新和分析的系统，适用于电商、金融、物流等需要快速响应的场景。相比传统数仓，它具备更高的时效性和并发处理能力，能够帮助企业及时捕捉业务动态，提升决策效率。本文详细解析了其实现架构与核心特点，并结合实际案例说明其应用价值。
游客7wkr3y7oxyt7a
1388 9
穿过生命散发芬芳
|
11月前
|
SQL DataWorks 关系型数据库
DataWorks+Hologres：打造企业级实时数仓与高效OLAP分析平台
本方案基于阿里云DataWorks与实时数仓Hologres，实现数据库RDS数据实时同步至Hologres，并通过Hologres高性能OLAP分析能力，完成一站式实时数据分析。DataWorks提供全链路数据集成与治理，Hologres支持实时写入与极速查询，二者深度融合构建离在线一体化数仓，助力企业加速数字化升级。
穿过生命散发芬芳
712 3
灵杰开发者
|
SQL 消息中间件 Kafka
Flink+Paimon+Hologres，面向未来的一体化实时湖仓平台架构设计
本文介绍了阿里云实时数仓Hologres负责人姜伟华在Flink Forward Asia 2024上的分享，涵盖实时数仓的发展历程、从实时数仓到实时湖仓的演进，以及总结。文章通过三代实时数仓架构的演变，详细解析了Lambda架构、Kafka实时数仓分层+OLAP、Hologres实时数仓分层复用等方案，并探讨了未来从实时数仓到实时湖仓的演进方向。最后，结合实际案例和Demo展示了Hologres + Flink + Paimon在实时湖仓中的应用，帮助用户根据业务需求选择合适的方案。
灵杰开发者
1948 20
Flink+Paimon+Hologres，面向未来的一体化实时湖仓平台架构设计
灵杰开发者
|
SQL 监控 关系型数据库
用友畅捷通在Flink上构建实时数仓、挑战与最佳实践
本文整理自用友畅捷通数据架构师王龙强在FFA2024上的分享，介绍了公司在Flink上构建实时数仓的经验。内容涵盖业务背景、数仓建设、当前挑战、最佳实践和未来展望。随着数据量增长，公司面临数据库性能瓶颈及实时数据处理需求，通过引入Flink技术逐步解决了数据同步、链路稳定性和表结构差异等问题，并计划在未来进一步优化链路稳定性、探索湖仓一体架构以及结合AI技术推进数据资源高效利用。
灵杰开发者
991 25
用友畅捷通在Flink上构建实时数仓、挑战与最佳实践
灵杰开发者
|
存储 SQL Java
Flink CDC + Hologres高性能数据同步优化实践
本文整理自阿里云高级技术专家胡一博老师在Flink Forward Asia 2024数据集成（二）专场的分享，主要内容包括：1. Hologres介绍：实时数据仓库，支持毫秒级写入和高QPS查询；2. 写入优化：通过改进缓冲队列、连接池和COPY模式提高吞吐量和降低延迟；3. 消费优化：优化离线场景和分区表的消费逻辑，提升性能和资源利用率；4. 未来展望：进一步简化用户操作，支持更多DDL操作及全增量消费。Hologres 3.0全新升级为一体化实时湖仓平台，提供多项新功能并降低使用成本。
灵杰开发者
975 1
Flink CDC + Hologres高性能数据同步优化实践
技术小达人
|
存储 消息中间件 OLAP
Hologres+Flink企业级实时数仓核心能力介绍-2024实时数仓Hologres线上公开课03
本次分享由阿里云产品经理骆撷冬（观秋）主讲，主题为“Hologres+Flink企业级实时数仓核心能力”，是2024实时数仓Hologres线上公开课的第三期。课程详细介绍了Hologres与Flink结合搭建的企业级实时数仓的核心能力，包括解决实时数仓分层问题、基于Flink Catalog的Streaming Warehouse实践，并通过典型客户案例展示了其应用效果。
技术小达人
585 10
Hologres+Flink企业级实时数仓核心能力介绍-2024实时数仓Hologres线上公开课03
技术小达人
|
SQL 消息中间件 Serverless
​Flink+Paimon+Hologres，面向未来的一体化实时湖仓平台架构设计
​Flink+Paimon+Hologres，面向未来的一体化实时湖仓平台架构设计
技术小达人
483 4
技术小达人
|
存储 SQL 运维
Hologres OLAP场景核心能力介绍-2024实时数仓Hologres线上公开课02
本次分享由Hologres产品经理赵红梅（梅酱）介绍Hologres在OLAP场景中的核心能力。内容涵盖OLAP场景的痛点、Hologres的核心优势及其解决方法，包括实时数仓分析、湖仓一体加速、丰富的索引和查询性能优化等。此外，还介绍了Hologres在兼容PG生态、支持多种BI工具以及高级企业级功能如计算组隔离和serverless computing等方面的优势。最后通过小红书和乐元素两个典型客户案例，展示了Hologres在实际应用中的显著效益，如运维成本降低、查询性能提升及成本节省等。
技术小达人
563 7

热门文章

最新文章

  • 1
    云原生数据仓库AnalyticDB操作报错合集之报错代码"[31004, 2023121817001319216817200303151051107] : Compiler failed and interpreter is disabled"是什么导致的
  • 2
    开源湖仓一体平台(二):Arctic(上篇)
  • 3
    mysql ID有重复值后设置主键
  • 4
    AnalyticDB助力客如云实现精准营销服务
  • 5
    使用 Xtrabackup 在线对MySQL做主从复制
  • 6
    改良版本mysqldump来备份MYSQL数据库
  • 7
    Mysql判断是否启动脚本
  • 8
    Linux下mysql新建账号及权限设置
  • 9
    前沿分享｜阿里云资深技术专家 魏闯先：AnalyticDB PostgreSQL年度新版本发布
  • 10
    双11专刊｜云原生数据仓库AnalyticDB支撑双11，大幅提升分析实时性和用户体验
  • 1
    实时数仓和离线数仓还分不清楚？看完就懂了
    1368
  • 2
    MaxCompute x 聚水潭：基于近实时数仓解决方案构建统一增全量一体化数据链路
    476
  • 3
    实时数仓Hologres V3.1版本发布，Serverless型实例从零开始构建OLAP系统
    1414
  • 4
    什么是实时数仓？实时数仓又有哪些应用场景？
    1388
  • 5
    DataWorks+Hologres：打造企业级实时数仓与高效OLAP分析平台
    712
  • 6
    破界·融合·进化：解码DataWorks与Hologres的湖仓一体实践
    449
  • 7
    基于 Dify + Hologres + QWen3 进行企业级大数据的处理和分析
    1275
  • 8
    基于 Flink+Paimon+Hologres 搭建淘天集团湖仓一体数据链路
    1994
  • 9
    云上玩转Qwen3系列之三：PAI-LangStudio x Hologres构建ChatBI数据分析Agent应用
    847
  • 10
    Hologres+函数计算+Qwen3，对接MCP构建企业级数据分析 Agent
    1052

    • 相关课程

    更多
  • 大数据Flink实时旅游平台环境篇 2020版
  • Apache Flink 入门到实战 - Flink开源社区出品
  • 实时计算 Flink 版产品入门与实操
  • 开源 Flink 极速上手教程
  • 大数据实时计算框架Spark快速入门
  • Apache Flink 入门

    • 相关电子书

    更多
  • Flink峰会 - 李佳林
  • Flink峰会 - 徐榜江
  • Flink CDC Meetup PPT - 龚中强
    • 下一篇
    小红书笔记详情API深度解析与实战指南（2025年最新版）