实时数仓Workshop · 广州站 9.15 邀您参加!

简介: 9月15日,聚焦 Flink + Hologres 实时数仓在数据链路中扮演的角色与在智能商业中的重要价值。

img

点击参与线下交流

随着数字化业务的增长,企业的数据量呈现爆发式增长,数据仓库已经成为企业数据发展到一定规模后必然提供的基础服务之一。数据的时效性,成为数据仓库建设中必不可少的一环,企业最常做的就是通过实时数仓建设,满足对数据的快速探索。

在实际业务中,实时数仓需要支持数据实时写入与更新、业务敏捷快速响应、数据自助分析、运维操作便捷、云原生弹性扩缩容等一列需求,而这就依赖一款强大的实时数仓引擎。阿里云实时计算 Flink 版作为一款大数据流式计算引擎,提供全增量一体化数据同步技术、强大的流式 ETL 等能力,支持海量数据实时写入处理;新一代实时数仓引擎阿里云 Hologres 能同时解决 OLAP 多维分析、在线服务、离线数据加速等多个业务查询场景。

通过阿里云实时计算 Flink 版与阿里云 Hologres 的强强结合,实现全链路的数据探索实时化、数据分析敏捷化,快速助力业务构建企业级一站式实时数仓,实现更具时效更智能的业务决策。

9月15日,实时数仓 Workshop · 广州站将聚焦 Flink & Hologres 实时数仓在数据链路中扮演的角色与在智能商业中的重要价值,由业内各界的实时数仓实践者一同探讨实时计算未来趋势、开源生态发展、实时数仓场景在各行业中的实践与应用及平台智能化的探索与思考。

img

嘉宾及议题介绍

01《阿里云实时计算Flink版产品介绍与演示》

乐洋|阿里云高级产品专家

围绕Flink的相关场景,包括包括调优、运维、开发等,以及实时数仓相关解决方案

02《Flink和Hologres构建企业级一站式实时数仓》

余文兵|阿里巴巴技术专家

随着实时数仓的普及,在线化、一站式、敏捷化成为实时数仓新的发展趋势,阿里云Hologres支持高吞吐写入与更新、PB级数据秒级查询以及高并发的在线服务查询,兼容PG生态,与Flink深度融合,解决传统数仓加工链路长、数据出口多、数据更新难等问题,提供一站式实时数仓标准解决方案,加速企业实时数仓建设。

03《37手游基于云平台的大数据建设实践》

史飞翔|37手游大数据平台高级开发工程师

传统的大数据架构服务器、运维成本高,扩展性有限,维护组件较多,监控不够完善。上云拐点已经到来,开源大数据上云已成为业界共识。如何在云上低成本存储的同时又实现弹性计算的需求,如何仅通过sql实现流式计算,如何解决业务查询报表慢的问题,本次分享将为你揭晓答案,欢迎大数据技术爱好者交流和探讨!

04《Flink+Hologres实时数仓在Lazada的建设及应用》

徐鑫豪|Lazada数据技术专家

本次会介绍Flink和Hologres架构在Lazada的落地实践。Lazada基于Flink和Hologres技术构建的实时数仓,快速提供业务小二的多种OLAP多维分析能力,支撑Lazada AB实验、营销分析等数据平台场景,助力业务快速增长。

05《从ELK到EFK——结合Flink和Elasticsearch新特性重构全观测方案》

朱杰|Elastic 资深解决方案架构师

赵弘扬|阿里云高级产品专家

近几年,随着IT架构逐步向云的衍进,传统的IT运维、日志/指标监控与分析、安全分析等手段,也逐渐从独立的日志、指标、分布式追踪系统迈向云上统一和融合的全观测平台。“开源云服务”和“全观测”这两个近期在国内非常时兴的概念,相结合会碰撞出什么样的火花?

如何基于云上的海量存储能力、计算能力,处理企业IT架构所面临的数据量大、数据预处理量大、链路时效性要求高和告警任务复杂高频等艰巨的问题?本次分享的内容将为大家介绍并分析:阿里云上的Elasticsearch和Flink服务,是如何高效、低成本地解决上述问题,实现全观测降本增效的目标。

活动详情

时间:2022年9月15日 13:30-18:00

地点:广东省广州市天河区珠江新城W酒店

PC 端直播观看:https://developer.aliyun.com/live/250086

移动端建议关注 ApacheFlink 视频号预约观看

img

点击参与线下交流

延伸阅读
阿里云实时计算 Flink 版 x Hologres: 构建企业级一站式实时数仓


img

2022第四届 实时计算FLINK挑战赛

49万奖金等你来拿!

延续 “鼓励师计划”,赢取丰厚礼品!

点击进入赛事官网报名参赛

更多 Flink 相关技术问题,可扫码加入社区钉钉交流群
第一时间获取最新技术文章和社区动态,请关注公众号~

O1CN01tmtpiy1iazJYZdixL_!!6000000004430-2-tps-899-548.png"

活动推荐

阿里云基于 Apache Flink 构建的企业级产品-实时计算Flink版现开启活动:
99 元试用 实时计算Flink版(包年包月、10CU)即有机会获得 Flink 独家定制卫衣;另包 3 个月及以上还有 85 折优惠!
了解活动详情:https://www.aliyun.com/product/bigdata/sc

image.png

相关实践学习
基于Hologres轻量实时的高性能OLAP分析
本教程基于GitHub Archive公开数据集,通过DataWorks将GitHub中的项⽬、行为等20多种事件类型数据实时采集至Hologres进行分析,同时使用DataV内置模板,快速搭建实时可视化数据大屏,从开发者、项⽬、编程语⾔等多个维度了解GitHub实时数据变化情况。
相关文章
|
存储 数据采集 运维
|
8月前
|
存储 消息中间件 OLAP
基于 Flink+Paimon+Hologres 搭建淘天集团湖仓一体数据链路
本文整理自淘天集团高级数据开发工程师朱奥在Flink Forward Asia 2024的分享,围绕实时数仓优化展开。内容涵盖项目背景、核心策略、解决方案、项目价值及未来计划五部分。通过引入Paimon和Hologres技术,解决当前流批存储不统一、实时数据可见性差等痛点,实现流批一体存储与高效近实时数据加工。项目显著提升了数据时效性和开发运维效率,降低了使用门槛与成本,并规划未来在集团内推广湖仓一体架构,探索更多技术创新场景。
1549 3
基于 Flink+Paimon+Hologres 搭建淘天集团湖仓一体数据链路
|
SQL 运维 网络安全
【实践】基于Hologres+Flink搭建GitHub实时数据查询
本文介绍了如何利用Flink和Hologres构建GitHub公开事件数据的实时数仓,并对接BI工具实现数据实时分析。流程包括创建VPC、Hologres、OSS、Flink实例,配置Hologres内部表,通过Flink实时写入数据至Hologres,查询实时数据,以及清理资源等步骤。
|
11月前
|
SQL 消息中间件 Kafka
Flink+Paimon+Hologres,面向未来的一体化实时湖仓平台架构设计
本文介绍了阿里云实时数仓Hologres负责人姜伟华在Flink Forward Asia 2024上的分享,涵盖实时数仓的发展历程、从实时数仓到实时湖仓的演进,以及总结。文章通过三代实时数仓架构的演变,详细解析了Lambda架构、Kafka实时数仓分层+OLAP、Hologres实时数仓分层复用等方案,并探讨了未来从实时数仓到实时湖仓的演进方向。最后,结合实际案例和Demo展示了Hologres + Flink + Paimon在实时湖仓中的应用,帮助用户根据业务需求选择合适的方案。
1516 20
Flink+Paimon+Hologres,面向未来的一体化实时湖仓平台架构设计
|
10月前
|
存储 SQL Java
Flink CDC + Hologres高性能数据同步优化实践
本文整理自阿里云高级技术专家胡一博老师在Flink Forward Asia 2024数据集成(二)专场的分享,主要内容包括:1. Hologres介绍:实时数据仓库,支持毫秒级写入和高QPS查询;2. 写入优化:通过改进缓冲队列、连接池和COPY模式提高吞吐量和降低延迟;3. 消费优化:优化离线场景和分区表的消费逻辑,提升性能和资源利用率;4. 未来展望:进一步简化用户操作,支持更多DDL操作及全增量消费。Hologres 3.0全新升级为一体化实时湖仓平台,提供多项新功能并降低使用成本。
745 1
Flink CDC + Hologres高性能数据同步优化实践
|
12月前
|
SQL 监控 关系型数据库
用友畅捷通在Flink上构建实时数仓、挑战与最佳实践
本文整理自用友畅捷通数据架构师王龙强在FFA2024上的分享,介绍了公司在Flink上构建实时数仓的经验。内容涵盖业务背景、数仓建设、当前挑战、最佳实践和未来展望。随着数据量增长,公司面临数据库性能瓶颈及实时数据处理需求,通过引入Flink技术逐步解决了数据同步、链路稳定性和表结构差异等问题,并计划在未来进一步优化链路稳定性、探索湖仓一体架构以及结合AI技术推进数据资源高效利用。
823 25
用友畅捷通在Flink上构建实时数仓、挑战与最佳实践
|
12月前
|
存储 消息中间件 OLAP
Hologres+Flink企业级实时数仓核心能力介绍-2024实时数仓Hologres线上公开课03
本次分享由阿里云产品经理骆撷冬(观秋)主讲,主题为“Hologres+Flink企业级实时数仓核心能力”,是2024实时数仓Hologres线上公开课的第三期。课程详细介绍了Hologres与Flink结合搭建的企业级实时数仓的核心能力,包括解决实时数仓分层问题、基于Flink Catalog的Streaming Warehouse实践,并通过典型客户案例展示了其应用效果。
385 10
Hologres+Flink企业级实时数仓核心能力介绍-2024实时数仓Hologres线上公开课03
|
10月前
|
SQL 消息中间件 Serverless
​Flink+Paimon+Hologres,面向未来的一体化实时湖仓平台架构设计
​Flink+Paimon+Hologres,面向未来的一体化实时湖仓平台架构设计
306 4
|
运维 数据挖掘 网络安全
场景实践 | 基于Flink+Hologres搭建GitHub实时数据分析
基于Flink和Hologres构建的实时数仓方案在数据开发运维体验、成本与收益等方面均表现出色。同时,该产品还具有与其他产品联动组合的可能性,能够为企业提供更全面、更智能的数据处理和分析解决方案。
|
SQL 分布式计算 数据库
畅捷通基于Flink的实时数仓落地实践
本文整理自畅捷通总架构师、阿里云MVP专家郑芸老师在 Flink Forward Asia 2023 中闭门会上的分享。
8525 15
畅捷通基于Flink的实时数仓落地实践