实时数仓Hologres 11月刊

简介: 实时数仓Hologres (原名交互式分析)2021年11月刊将会为您带来11月产品、技术最新动态,欢迎订阅。

实时数仓Hologres 2021年11月刊将会为您带来11月产品、技术最新动态,欢迎订阅Hologres开发者社区圈子。欢迎详细阅读本次月刊并结合业务进行实践,若需要技术探讨或者任何问题欢迎加入Hologers钉钉群,二维码见文末。

【12月重要通知】

1.交互式分析Hologers正式改名实时数仓Hologres

交互式分析Hologres正式改名实时数仓Hologres,致力于提供海量数据实时写入、实时更新、实时分析等,与MaxCompute、Flink、DataWorks深度融合,提供离在线一体化全栈数仓解决方案。


2.Lighting下线通知

MaxCompute Lightning服务(即使用lightning.cn-*相关Endpoint的服务)由于技术架构变更,将于2021年12月31日00点00分关闭MaxCompute Lightning新服务的开通入口。已存在的MaxCompute Lightning服务目前仍可继续使用,已存在的MaxCompute Lightning将于2022年12月31日00点00分下线。


针对MaxCompute查询加速的交互式分析场景,建议您升级成MaxCompute交互式分析(Hologres),详情请参见迁移公告。MaxCompute交互式分析(Hologres)兼容Postgres协议,原有应用无需修改,查询性能更稳定,功能更丰富,如需咨询相关详情,请添加钉钉群:Lightning迁移支持群(群号:35028911)


【11月重要功能发布】

1.【新功能】资源组隔离计算资源

在V1.1版本,Hologres新增支持使用资源组来助力您管理实例内的计算资源,,通过为不同的用户账号分配不同的计算资源(即CU,包括CPU和内存),限制用户使用计算资源的上限,实现单实例多负载的隔离,保证了用户之间、应用之间作业的互不影响。详情见资源组隔离文档


适用客户:Hologres公共云


2.【新功能】共享存储多实例部署提升高可用

Hologres 从V1.1版本开始,针对线上生产环境高可用的场景,提供了共享存储的多实例部署方式,在该模式下支持故障隔离,负载隔离,有效支撑了高可用场景。在该方案中,主实例具备完整能力,数据可读可写,权限、系统参数可配置,而子实例处于只读状态,所有的变更都通过主实例完成。详情使用见共享存储多实例


适用客户:Hologres公共云


3.【新功能】支持JDBC订阅Hologres binlog

在V0.9版本,Hologres支持Flink订阅Hologres binlog,在V1.1版本,支持JDBC实时消费Hologres Binlog,实现全链路事件驱动。详情使用见jdbc订阅Hologres binlog


适用客户:Hologres公共云


4.【新功能】读取MaxCompute存储加密数据

MaxCompute支持通过密钥管理服务KMS(Key Management Service)对数据进行加密存储,提供数据静态保护能力,满足企业监管和安全合规需求。Hologres与MaxCompure深度打通,支持直接读取maxCompute数据,在V1.1版本,Hologres支持读取MaxCompute加密数据,提升Hologres与MaxCompute的兼容性。详情见读取MC加密数据


适用客户:Hologres公共云


5.【新功能】支持行列混存表

Hologres行存表适用于基于PK的点查场景,列存表适合复杂OLAP查询。在V1.1版本,支持行列混存表,同时适用列存和行存的场景,既支持高效点查也支持OLAP分析,但也带来了更多的存储开销,以及内部数据状态同步的开销。详情见文档建表


适用客户:Hologres公共云


6.【优化】单节点计算内存上限取消20GB限制

Hologres从 V1.1.24版本开始,计算内存取消单节点20GB限制,采用动态调整节点内存。后端会去检查当前节点的内存水位,从而动态分配计算节点的内存,以此保证Query可以运行成功。

同时,1.1版本针对元数据管理内存进行了优化,确保元数据使用的内存降低。因此,升级到1.1.24版本之后,若内存水位不高,query oom的频率将会大大降低,若是执行Query时还报错超内存限制(报错:Query executor exceeded total memory limitation xxxxx: yyyy bytes used),说明内存已完全用到了上限,需要优化SQL或者扩容实例。


说明 一个实例后端由多个节点组成,不同实例规格对应不同节点数,单个节点的内存上限是64GB。内存会分为三部分,三分之一分配给计算,三分之一分配给缓存,三分之一分配给元数据。


适用客户:Hologres公共云


7.【新发布】法兰克福region上线

实时数仓Hologres在德国(法兰克福)商业化发布,增加商品可用区,支持按量付费和包年包月两种付费模式。


适用客户:Hologres公共云


【11月精选文章】



更多阿里巴巴实时数仓Hologres 产品信息,可扫码或者搜索加入实时数仓Hologres交流群(钉钉群号:32324975)。更多精彩请点击官网查看


合集.png

相关实践学习
基于Hologres轻量实时的高性能OLAP分析
本教程基于GitHub Archive公开数据集,通过DataWorks将GitHub中的项⽬、行为等20多种事件类型数据实时采集至Hologres进行分析,同时使用DataV内置模板,快速搭建实时可视化数据大屏,从开发者、项⽬、编程语⾔等多个维度了解GitHub实时数据变化情况。
相关文章
|
Ubuntu Java Linux
Manjaro Linux 入门使用教程
Manjaro 是一款基于 Arch LInux 的自由开源发行版,它吸收了 Arch Linux 优秀丰富的软件管理,同时提供了稳定流畅的操作体验。
6947 1
Manjaro Linux 入门使用教程
|
3月前
|
人工智能 小程序 API
OpenClaw是什么?用无影云电脑安装龙虾更简单,只需3部,保姆级教程来了
阿里云无影云电脑上线OpenClaw(龙虾AI助手)专属镜像,阿里云OpenClaw官方页面: https://t.aliyun.com/U/McEnoK 预装VS Code、钉钉、WPS等,支持飞书/钉钉/微信/QQ一键部署。3步即可完成购买、启动与API配置,实现文件操作、多工具联动及7×24小时个人Agent运行。(239字)
795 5
|
3月前
|
人工智能 安全 数据可视化
OpenClaw低成本部署指南:阿里云68元/年+免费Token,个人入门首选!
想低成本部署OpenClaw?阿里云轻量服务器仅68元/年(2核2G),搭配百炼100万免费Token,一键安装、零代码配置,轻松接入企微/钉钉/飞书等IM,小白也能30分钟上线专属AI助手!
710 2
|
编解码 网络协议
如何轻松地 rip 3D Blu-ray:详细步骤指南
随着3D电影和家庭影院的普及,越来越多的人希望将3D Blu-ray电影转换为数字文件,以便在多种设备上播放。本文介绍了使用DVDFab、MakeMKV+HandBrake和Leawo Blu-ray Ripper等软件轻松rip 3D Blu-ray的方法,帮助用户享受高质量的3D观影体验。这些工具不仅提供了便捷性和高质量的输出,还能节省存储空间。
1342 9
|
人工智能 定位技术 云计算
阿里云+Salesforce:更多功能,上新!
阿里云与Salesforce合作,推出多项新功能,包括移动应用、Connect、外部身份识别等,支持瓴羊智能和高德地图集成,助力企业数字化转型。
|
存储 安全 Java
商汤的API如何进行鉴权?
商汤的API如何进行鉴权?
564 2
|
前端开发
你不知道的css——4. 基线、中线、x-height、单位ex(含文本与图标对齐技巧)
你不知道的css——4. 基线、中线、x-height、单位ex(含文本与图标对齐技巧)
457 2
|
NoSQL Java 应用服务中间件
技术笔记:Profiles简介
技术笔记:Profiles简介
405 0
|
存储 数据库
7.Mysql 快速建表,你学会了吗?
7.Mysql 快速建表,你学会了吗?
416 0
|
Web App开发 JavaScript 安全
Cordova页面加载外网图片失败,Refused to load the image
原文:Cordova页面加载外网图片失败,Refused to load the image 1.使用Cordova页面加载外网图片失败,抛出异常 Refused to load the image 'http://xxx.
4875 0

热门文章

最新文章