实时数仓Hologres集群问题之瓶颈如何解决

本文涉及的产品
实时数仓Hologres,5000CU*H 100GB 3个月
简介: Kubernetes的kubelet每10秒向kube-apiserver上报一次心跳,可能对apiserver及ETCD带来写压力,尤其在大规模集群(如5000节点)中更为显著。

问题一:Kubernetes的上报心跳的频率是多少?这如何影响了kube-apiserve和ETCD的性能?


Kubernetes的kubelet上报心跳的频率是多少?这如何影响了kube-apiserver和ETCD的性能?


参考回答:

Kubernetes的kubelet每10秒上报一次自身全量信息作为心跳同步给k8s,当节点数量达到5000时,这些心跳数据会对kube-apiserver和ETCD造成较大的写压力。



关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/666024


问题二:Kubernetes的上报心跳的频率是多少?这如何影响了kube-apiserve和ETCD的性能?


Kubernetes的kubelet上报心跳的频率是多少?这如何影响了kube-apiserver和ETCD的性能?


参考回答:

Kubernetes的kubelet每10秒上报一次自身全量信息作为心跳同步给k8s,当节点数量达到5000时,这些心跳数据会对kube-apiserver和ETCD造成较大的写压力。


关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/666028


问题三:为了突破Kubernetes集群规模的瓶颈,对etcd进行了哪些优化?


为了突破Kubernetes集群规模的瓶颈,对etcd进行了哪些优化?


参考回答:

为了突破Kubernetes集群规模的瓶颈,对etcd设计了新的内存空闲页管理算法,大幅优化了etcd的性能。


关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/666030


问题四:在优化Kubernetes的APIServer时,采取了哪些措施来解决性能瓶颈?


在优化Kubernetes的APIServer时,采取了哪些措施来解决性能瓶颈?


参考回答:

在优化Kubernetes的APIServer时,通过落地轻量级心跳和改进HA集群下多个API Server节点的负载均衡,解决了APIServer的性能瓶颈。



关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/666033


问题五:Hologres的运维体系是如何设计的,主要解决了哪些问题?


Hologres的运维体系是如何设计的,主要解决了哪些问题?


参考回答:

Hologres的运维体系设计了资源和集群交付的自动化、集群和实例级别的实时可观测性,以及智能化的自愈体系,主要解决了资源和集群交付的自动化问题、实时可观测性问题和智能化的自愈体系,提升了Hologres的SLA到生产可用级别。



关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/666034




相关实践学习
基于Hologres轻松玩转一站式实时仓库
本场景介绍如何利用阿里云MaxCompute、实时计算Flink和交互式分析服务Hologres开发离线、实时数据融合分析的数据大屏应用。
相关文章
|
1月前
|
缓存 监控 大数据
构建高可用AnalyticDB集群:最佳实践
【10月更文挑战第25天】在大数据时代,数据仓库和分析平台的高可用性变得尤为重要。作为阿里巴巴推出的一款完全托管的PB级实时数据仓库服务,AnalyticDB(ADB)凭借其高性能、易扩展和高可用的特点,成为众多企业的首选。本文将从我个人的角度出发,分享如何构建和维护高可用性的AnalyticDB集群,确保系统在各种情况下都能稳定运行。
36 0
|
负载均衡 Kubernetes 关系型数据库
更快、更准、更灵活,AnalyticDB MySQL多集群自动弹性技术解析
在全球经济增长放缓的大背景之下,企业在加强数字化建设的过程中,降本增效成为一个绕不开的话题。云原生数仓AnalyticDB MySQL湖仓版(以下简称ADB MySQL) 在发布之初提供了定时弹性功能,帮助业务有规律的客户定时升降配计算资源以节省成本。时隔一年,ADB MySQL针对用户痛点,在今年云栖大会上重磅推出Multi-Cluster弹性资源模式,它具备贴合用户负载、自动配置、性能线性提升等优点,进一步帮用户节省成本,提高计算效率。
|
SQL Cloud Native NoSQL
《阿里云认证的解析与实战-数据仓库ACP认证》——功能演示一:实现AnalyticDB MySQL版弹性能力——五、连接集群
《阿里云认证的解析与实战-数据仓库ACP认证》——功能演示一:实现AnalyticDB MySQL版弹性能力——五、连接集群
|
Cloud Native 关系型数据库 MySQL
《阿里云认证的解析与实战-数据仓库ACP认证》——功能演示一:实现AnalyticDB MySQL版弹性能力——二、创建集群
《阿里云认证的解析与实战-数据仓库ACP认证》——功能演示一:实现AnalyticDB MySQL版弹性能力——二、创建集群
|
存储 Cloud Native OLAP
重磅更新丨偶数科技发布 OushuDB 5.0,多活主节点、多虚拟集群等特性完美支持实时湖仓一体
重磅更新丨偶数科技发布 OushuDB 5.0,多活主节点、多虚拟集群等特性完美支持实时湖仓一体
154 0
|
SQL 存储 分布式计算
Hologres共享集群助力淘宝订阅极致精细化运营
通过本文我们将会介绍,Hologres共享集群如何助力淘宝订阅系统进行精细化运营。
672 0
Hologres共享集群助力淘宝订阅极致精细化运营
|
存储 分布式计算 Cloud Native
云原生数仓如何破解大规模集群的关联查询性能问题?
本文从ADB PG架构设计的角度出发,探讨Runtime Filter在ADB PG中的实现方案,并介绍了基于Bloom Filter的ADB PG Dynamic Join Filter功能技术细节。
613 1
云原生数仓如何破解大规模集群的关联查询性能问题?
|
存储 分布式计算 Cloud Native
云原生数仓ADB PG如何破解大规模集群的关联查询性能问题?
本文从ADB PG架构设计的角度出发,探讨Runtime Filter在ADB PG中的实现方案,并介绍了基于Bloom Filter的ADB PG Dynamic Join Filter功能技术细节。
571 0
|
存储 分布式计算 Cloud Native
干货 | 云原生数仓如何破解大规模集群的关联查询性能问题?
近年来,数据库系统服务的数据量呈指数级增长,同时也面临处理的业务需求愈发复杂、实时性要求越来越高等挑战。单机数据库系统已经逐渐不能满足现代的数据库服务要求,因此分布式数据库/数据仓库得到了越来越广泛地运用。
331 0
|
存储 Cloud Native 关系型数据库
云原生数仓如何破解大规模集群的关联查询性能问题?
AnalyticDB for PostgreSQL(以下简称ADB PG)是一款PB级的MPP架构云原生数据仓库。本文从ADB PG架构设计的角度出发,探讨Runtime Filter在ADB PG中的实现方案,并介绍了基于Bloom Filter的ADB PG Dynamic Join Filter功能技术细节。
云原生数仓如何破解大规模集群的关联查询性能问题?

热门文章

最新文章

下一篇
DataWorks