实时数仓Hologres V3.1版本发布,Serverless型实例从零开始构建OLAP系统

简介: Hologres推出Serverless型实例,支持按需计费、无需独享资源,适合新业务探索分析。高性能查询内表及MaxCompute/OSS外表,弹性扩展至512CU,性能媲美主流开源产品。新增Dynamic Table升级、直读架构优化及ChatBI解决方案,助力高效数据分析。

Highlight

  • Down To Zero,Hologres Serverless型实例邀测

Serverless型可从零开始低成本启动OLAP系统建设,完成新业务、新场景的探索性分析与临时性数据分析需求,高性能查询内表与MaxCompute/OSS外表。Serverless型邀测申请>>>Serverless型使用说明>>>

  • 无需购买独享资源,计算资源不使用不收费
  • 用多少算多少,按Query按量计费
  • 当前最大可弹性512CU,性能与独享资源持平
  • TPC-H 1TB 测试对比3.0版本性能再提升33%,Clickbench单表性能基于70%资源下超过Clickhouse、Doris等主流开源产品
  • Serverless Computing支持预估资源自动判断执行,支持更多DML场景、读写内外表加密表、Rebuild、存储过程等
  • Dynamic Table 升级,支持 Auto Refresh,双流/多表 Join,成本更低、性能更高
  • 直读MaxCompute架构升级,性能提升33%,支持直读Delta Table、Append 2.0 Table、动态脱敏表和表的Schema Evolution
  • 联合DataWorks发布ChatBI解决方案,快速完成数据分析报告
  • 计算组支持SQL无损扩缩容,连接闪断
  • 新发布逻辑分区表,灵活易用,减少元数据占用

实例升级说明:https://help.aliyun.com/zh/hologres/user-guide/instance-upgrades


Hologres 3.1版本发布总览

1. Down To Zero,Hologres Serverless型实例邀测

在OLAP分析系统构建时候,一般都需要购买预留资源,为了保证OLAP性能,一般都要从32核开始启动,成本较高,而且由于核数少,很多临时的大查询会打满集群导致OOM,用的人多了资源挤占情况也非常严重。Hologres推出Serverless型可从零开始低成本启动OLAP系统建设,帮助企业快速完成新业务、新场景的探索性分析与临时性数据分析需求,高性能查询内表与MaxCompute/OSS外表。Serverless型邀测申请>>>Serverless型使用说明>>>

  • 无需购买独享资源,计算资源不使用不收费
  • 用多少算多少,按Query按量计费
  • 最大可弹性512CU,性能与独享资源持平

幻灯片5.jpeg

对比固定的独享计算资源,Serverless型在MPP架构下实现了按Query计费,100%完全适应资源负载需求。

在BI分析场景下,Serverless型支持市面主流的BI分析与可视化工具,包含Apache Superset、DataV、DataWorks、FineBI、FineReport、Grafana、Power BI、Qlik、Quick BI、Tableau等。

2. TPC-H 1TB性能再提升33%,单表性能超越CK、Doris等主流开源产品

Hologres每个版本迭代都会进行性能优化,例如2.2版本对比1.1版本提升100%,3.1版本在3.0的基础上再次提升33%,跟随版本更新企业可以享受云上技术红利。

3. Serverless Comuting支持自动判断

Serverless Comuting可以以按量计费的形式稳定运行大查询、大任务,并确保作业之间资源隔离,避免了资源竞争与相互干扰的情况。原本需要单独设置执行,3.1版本可以根据预估计算资源自动判断,在执行之前,如果超过阈值,可以自动使用Serverless Comuting执行,防止突发性流量或者查询打满集群。

3.1版本增加了Serverless Comuting更多的场景,支持更多DML场景、读写内外表加密表、Rebuild、存储过程等

4. Dynamic Table 升级,支持 Auto Refresh,双流/多表 Join

Dynamic Table是Hologres推出了的明式数据处理架构,业务可以根据需求设置不同的数据刷新策略,实现数据从基表对象到Dynamic Table的自动流转,满足业务统一开发、数据自动流转、处理时效性等诉求。原本刷新模式需要手动设置,并且写死为某一种模式。3.1版本可以将模式设定为Auto,如果query支持增量刷新,则优先执行增量刷新,否则退化为全量刷新。同时支持双流多表Join,性能更高,成本更低。

5. 直读MaxCompute架构升级,性能提升33%

MaxCompute与Hologres都是阿里云自研的数仓产品,具备双向高性能直读能力,对比其他组合方案,具备更加易用、高速的实时离线一体化解决方案。3.1版本直读MaxCompute架构升级2.0,对比1.0直读提升33%。同时支持了MaxCompute新推出的Delta Table、Append 2.0 Table、动态脱敏表和表的Schema Evolution等等。

6. 联合DataWorks发布ChatBI解决方案,快速完成数据分析报告

Hologres作为面向分析场景的产品,与DataWorks ChatBI天然结合成解决方案,用户通过提问快速完成智能检索、智能取数、智能绘图、智能总结。

7. 计算组支持SQL无损扩缩容,连接闪断

Hologres在3.1版本全面支持了在实例扩缩容的SQL无损,方便用户在升级时保障业务稳定。


8. 新发布逻辑分区表,灵活易用,减少元数据占用

Hologres 3.1发布逻辑分区表,对比3.0的物理分区表,逻辑辑分区表更加灵活易用,减少元数据占用

9. 其他功能概览



历史版本发布公告:

实时数仓Hologres V3.0全新发布,升级一体化实时湖仓平台>>>

实时数仓Hologres V2.2版本发布,Serverless Computing降本20%>>>

实时数仓Hologres V2.1版本发布,新增计算组实例构建高可用实时数仓>>>

相关实践学习
基于Hologres轻量实时的高性能OLAP分析
本教程基于GitHub Archive公开数据集,通过DataWorks将GitHub中的项⽬、行为等20多种事件类型数据实时采集至Hologres进行分析,同时使用DataV内置模板,快速搭建实时可视化数据大屏,从开发者、项⽬、编程语⾔等多个维度了解GitHub实时数据变化情况。
相关文章
|
8月前
|
分布式计算 运维 搜索推荐
立马耀:通过阿里云 Serverless Spark 和 Milvus 构建高效向量检索系统,驱动个性化推荐业务
蝉妈妈旗下蝉选通过迁移到阿里云 Serverless Spark 及 Milvus,解决传统架构性能瓶颈与运维复杂性问题。新方案实现离线任务耗时减少40%、失败率降80%,Milvus 向量检索成本降低75%,支持更大规模数据处理,查询响应提速。
465 57
|
8月前
|
人工智能 关系型数据库 OLAP
光云科技 X AnalyticDB:构建 AI 时代下的云原生企业级数仓
AnalyticDB承载了光云海量数据的实时在线分析,为各个业务线的商家提供了丝滑的数据服务,实时物化视图、租户资源隔离、冷热分离等企业级特性,很好的解决了SaaS场景下的业务痛点,也平衡了成本。同时也基于通义+AnalyticDB研发了企业级智能客服、智能导购等行业解决方案,借助大模型和云计算为商家赋能。
701 17
|
5月前
|
SQL DataWorks 关系型数据库
DataWorks+Hologres:打造企业级实时数仓与高效OLAP分析平台
本方案基于阿里云DataWorks与实时数仓Hologres,实现数据库RDS数据实时同步至Hologres,并通过Hologres高性能OLAP分析能力,完成一站式实时数据分析。DataWorks提供全链路数据集成与治理,Hologres支持实时写入与极速查询,二者深度融合构建离在线一体化数仓,助力企业加速数字化升级。
|
9月前
|
存储 人工智能 自然语言处理
基于QwQ-32B+Hologres+PAI搭建 RAG 检索增强对话系统
本文介绍如何使用PAI-EAS部署基于QwQ大模型的RAG服务,并关联Hologres引擎实例。Hologres与达摩院自研高性能向量计算软件库Proxima深度整合,支持高性能、低延时、简单易用的向量计算能力。通过PAI-EAS,用户可以一键部署集成大语言模型(LLM)和检索增强生成(RAG)技术的对话系统服务,显著缩短部署时间并提升问答质量。具体步骤包括准备Hologres向量检索库、部署RAG服务、通过WebUI页面进行模型推理验证及API调用验证。Hologres支持高性能向量计算,适用于复杂任务的动态决策,帮助克服大模型在领域知识局限、信息更新滞后和误导性输出等方面的挑战。
|
9月前
|
人工智能 自然语言处理 API
Hologres × PAI × DeepSeek 搭建 RAG 检索增强对话系统
本文介绍如何使用PAI-EAS部署基于DeepSeek大模型的RAG(检索增强生成)服务,并关联Hologres引擎实例。Hologres与阿里云自研高性能向量计算软件库Proxima深度整合,支持高性能、低延时的向量计算能力。通过PAI-EAS,用户可以一键部署集成了大语言模型和RAG技术的对话系统服务,显著缩短部署时间,并提高问答质量。部署步骤包括准备Hologres向量检索库、部署基于DeepSeek的RAG服务、通过WebUI进行模型推理验证,以及通过API调用进行模型推理验证。Hologres还提供了特色功能支持,如高性能向量计算等。
|
10月前
|
SQL 分布式计算 容灾
实时数仓Hologres V2.2发布,Serverless Computing降本20%
实时数仓Hologres V2.2发布,Serverless Computing降本20%
114 0
实时数仓Hologres V2.2发布,Serverless Computing降本20%
|
2月前
|
人工智能 运维 Kubernetes
Serverless 应用引擎 SAE:为传统应用托底,为 AI 创新加速
在容器技术持续演进与 AI 全面爆发的当下,企业既要稳健托管传统业务,又要高效落地 AI 创新,如何在复杂的基础设施与频繁的版本变化中保持敏捷、稳定与低成本,成了所有技术团队的共同挑战。阿里云 Serverless 应用引擎(SAE)正是为应对这一时代挑战而生的破局者,SAE 以“免运维、强稳定、极致降本”为核心,通过一站式的应用级托管能力,同时支撑传统应用与 AI 应用,让企业把更多精力投入到业务创新。
483 30
|
3月前
|
存储 人工智能 Serverless
函数计算进化之路:AI 应用运行时的状态剖析
AI应用正从“请求-响应”迈向“对话式智能体”,推动Serverless架构向“会话原生”演进。阿里云函数计算引领云上 AI 应用 Serverless 运行时技术创新,实现性能、隔离与成本平衡,开启Serverless AI新范式。
512 12
|
8月前
|
SQL 分布式计算 Serverless
鹰角网络:EMR Serverless Spark 在《明日方舟》游戏业务的应用
鹰角网络为应对游戏业务高频活动带来的数据潮汐、资源弹性及稳定性需求,采用阿里云 EMR Serverless Spark 替代原有架构。迁移后实现研发效率提升,支持业务快速发展、计算效率提升,增强SLA保障,稳定性提升,降低运维成本,并支撑全球化数据架构部署。
931 56
鹰角网络:EMR Serverless Spark 在《明日方舟》游戏业务的应用

相关产品

  • 实时数仓 Hologres