阿里云ElasticSearch基础巡检指标

本文涉及的产品
检索分析服务 Elasticsearch 版,2核4GB开发者规格 1个月
简介: 阿里云ElasticSearch基础巡检指标

1. CPU使用率是否存在风险

image.pngimage.png

2. 磁盘使用率是否存在风险

image.pngimage.png

3. 内存使用率是否存在风险

image.png

3.1. JVM堆内存使用率

image.pngimage.png

3.2. 节点内存使用率

需要到es所在ecs的物理节点上查看整个节点内存的使用率

4. IOPS 是否存在风险

IOPS(Input/Output Per Second):指每秒 I/O 请求的数量。

云盘性能及指标计算参考文档:https://help.aliyun.com/zh/ecs/user-guide/block-storage-performance?spm=a2c4g.11186623.0.i9

image.pngimage.png

5. IO是否存在风险

image.png

6. data节点磁盘大小是否一致(是否存在数据节点 差异过大)

6.1. 控制台查看

image.png

6.2. GET ALLOCATION API

GET _cat/allocation?v
# 查看 disk.total 即可
# shards disk.indices disk.used disk.avail disk.total disk.percent host         ip           node
#    210       15.2gb    19.6gb     19.5gb     39.2gb           50 10.x 10.x mtEhu7m
#    209       15.3gb    19.6gb     19.6gb     39.2gb           50 10.x 10.x lApeSqm

7. 是否存在程序挂机

近7天没有节点离线和索引不可用

image.png

8. jvm配置是否合理(是否与机型匹配)

节点内存分配(JVM堆内存)默认不支持用户修改,产品侧以官方最佳实践配置。

64G的规格一下,一半堆内存 一半堆外存 超过64的规格,堆内存32GB 其他全是堆外存,堆外存由Lucene实例使用。

9. 是否存在节点主机名不符合规范

节点名称默认生成,不支持修改

# 可通过如下两个命令或控制台查看名字
GET /_cat/nodes?v
GET /_nodes/stats?human&pretty

image.png

10. 集群当前节点数与预设节点数是否相符

预设节点数 = 客户购买的节点数

集群当前节点数可以在监控或者控制台查看

image.png

11. 是否存在超大索引

# 可以根据所有节点存储的大小来观察是否有超常的超大索引
GET /_cat/indices?v&s=store.size:desc

12. 分片数与 节点数 差异较大

分片数最好是节点数的整数倍。

可以观察下索引的pri列与节点数的差异

GET /_cat/indices?v

image.png

13. 是否配置 node_left

index.unassigned.node_left.delayed_timeout,节点从集群中移除后,副本分片延迟分配的超时时间,默认是1min(分钟)

需要查看是否有默认pattern为[*]的template修改这一参数的默认值

GET /{索引名称}
# 在setting中查看相关的配置

image.png

14. 是否存在关闭的索引

GET /_cat/indices?v
# 查看 status 列是否有close的索引

image.png

15. 单node接近 1000个分片

GET _cat/allocation?v
# 查看 shards 列是否超过额定数额

image.png

16. 单分片的文档数不超过 20E

  1. 单个分片的存储 doc 数为21亿(2,147,483,519),超过则无法写入。
GET /_cat/shards?v&s=docs:desc
# 查看 docs 列是否超过额定数额
  1. 这里的doc数不光为shards中显示的doc count,还包含了delete的数据,可以通过如下的方式查看docs和indexing.delete_total的和是否超过指定阈值来判断巡检风险
GET _cat/shards{/某索引}?v&h=index,shard,prirep,docs,indexing.delete_total

17. 是否存在年久不用的 repo

GET /_cat/repositories?v
# 通过上面的命令来看 repo都有哪些
# 至于是否年久不用 可以通过下面的snapshot来看
# aliyun_auto_snapshot 这个是云es默认的一个快照仓库

18. 是否存在 无用的 snapshot

GET /_snapshot/{repo的名称}/_all
# 通过指定 repo的名称来看是否有最近的快照 start_time 和 end_time
# 这个看了一下,目前没有命令能一下判断出来是否存在无用的snapshot,要不写个脚本,要不手动看

image.png

相关实践学习
使用阿里云Elasticsearch体验信息检索加速
通过创建登录阿里云Elasticsearch集群,使用DataWorks将MySQL数据同步至Elasticsearch,体验多条件检索效果,简单展示数据同步和信息检索加速的过程和操作。
ElasticSearch 入门精讲
ElasticSearch是一个开源的、基于Lucene的、分布式、高扩展、高实时的搜索与数据分析引擎。根据DB-Engines的排名显示,Elasticsearch是最受欢迎的企业搜索引擎,其次是Apache Solr(也是基于Lucene)。 ElasticSearch的实现原理主要分为以下几个步骤: 用户将数据提交到Elastic Search 数据库中 通过分词控制器去将对应的语句分词,将其权重和分词结果一并存入数据 当用户搜索数据时候,再根据权重将结果排名、打分 将返回结果呈现给用户 Elasticsearch可以用于搜索各种文档。它提供可扩展的搜索,具有接近实时的搜索,并支持多租户。
相关文章
|
2月前
电子书阅读分享《Elasticsearch全观测技术解析与应用(构建日志、指标、APM统一观测平台)》
电子书阅读分享《Elasticsearch全观测技术解析与应用(构建日志、指标、APM统一观测平台)》
235 1
|
8月前
|
存储 弹性计算 编解码
阿里云倚天云服务器全方位介绍(市场背景、产品技术、指标数据等)
倚天云服务器是阿里云目前非常热门的云服务器产品,也是阿里云在2023年主推的系列云服务器,目前倚天云服务器包括计算型c8y、通用型g8y、内存型r8y等实例规格,倚天云服务器采用阿里自研倚天710处理器,基于最新一代CIPU和Dragonfly ARM Hypervisor ,通过芯片快速路径加速手段实现计算、存储、网络性能的大幅提升。本文介绍阿里云倚天云服务器推出的市场背景、倚天云服务器的产品技术如何以及倚天云服务器的各项指标数据情况。
929 0
阿里云倚天云服务器全方位介绍(市场背景、产品技术、指标数据等)
|
10月前
|
存储 机器学习/深度学习 Dragonfly
阿里云服务器c8y、g8y、r8y实例性能、指标数据及最新价格分享
继推出轻量应用服务器与通用算力型u1、计算型c7、通用型g7和内存型r7实例云服务器优惠之后,阿里云服务器优惠上新品了,性价比最高的c8y、g8y、r8y云服务器7.2折,购买时长最高可选5年,c8y、g8y、r8y云服务器采用阿里自研倚天710处理器,基于最新一代CIPU和Dragonfly ARM Hypervisor ,通过芯片快速路径加速手段实现计算、存储、网络性能的大幅提升。下面小编来详细介绍下这几款云服务器的实例性能、指标数据及可选配置和优惠价格情况。
阿里云服务器c8y、g8y、r8y实例性能、指标数据及最新价格分享
|
10月前
|
存储 弹性计算 缓存
阿里云通用型g7实例测评,实例特点、适用场景、性能、指标数据等数据参考
通用型g7实例云服务器是目前阿里云官方重点推荐的一款第七代云服务器实例,这款云服务器实例主打的是性能更优,下面小编通过实例介绍、云服务器配置、适用场景、性能提升、指标数据、最新价格这6个方面来做一个测评和介绍,看看这款性能更优云服务器到底怎么样,为什么阿里云官方活动会重点推荐这个实例规格的云服务器。
704 0
阿里云通用型g7实例测评,实例特点、适用场景、性能、指标数据等数据参考
|
存储 缓存 安全
阿里云服务器计算型c7 通用型g7 内存型r7实例性能及指标数据解析
计算型c7 通用型g7 内存型r7实例均属于阿里云最新的第七代云服务器实例规格,七代云服务器全量搭载安全芯片、构建新一代立体化可信环境,在云服务器安全、存储、网络和端到端性能方面均有所提升。下面是小编整理的阿里云服务器计算型c7 通用型g7 内存型r7实例性能及指标数据解析。
732 0
阿里云服务器计算型c7 通用型g7 内存型r7实例性能及指标数据解析
|
运维 大数据 数据库
《Elasticsearch全观测技术解析与应用(构建日志、指标、APM统一观测平台)》电子版地址
本书将从介绍Elasticsearch、全观测技术原理、行业应用到技术实践,全面系统地解读在大数据背景下,运维人员、开发人员等应用全观测技术的价值和实践上手指南。
475 0
《Elasticsearch全观测技术解析与应用(构建日志、指标、APM统一观测平台)》电子版地址
|
运维 大数据 数据库
《Elasticsearch全观测技术解析与应用(构建日志、指标、APM统一观测平台)》电子版下载地址
本书将从介绍Elasticsearch、全观测技术原理、行业应用到技术实践,全面系统地解读在大数据背景下,运维人员、开发人员等应用全观测技术的价值和实践上手指南。
308 0
《Elasticsearch全观测技术解析与应用(构建日志、指标、APM统一观测平台)》电子版下载地址
|
存储 消息中间件 弹性计算
阿里云内存增强型re7p实例规格介绍(实例特点、适用场景、指标数据)
阿里云在云服务器新人特惠中新增了一个内存增强型re7p实例规格的云服务器,这是继计算型c7、通用型g7和内存型r7实例之后,阿里云在活动中有增加的一款第七代云服务器实例,本文介绍云服务器ECS内存增强型re7p实例规格族的特点,并列出了具体的实例规格。
301 0
阿里云内存增强型re7p实例规格介绍(实例特点、适用场景、指标数据)
|
运维 大数据 数据库
《Elasticsearch全观测技术解析与应用(构建日志、指标、APM统一观测平台)》电子版
本书将从介绍Elasticsearch、全观测技术原理、行业应用到技术实践,全面系统地解读在大数据背景下,运维人员、开发人员等应用全观测技术的价值和实践上手指南。
82 0
《Elasticsearch全观测技术解析与应用(构建日志、指标、APM统一观测平台)》电子版
|
运维 大数据 数据库
《Elasticsearch全观测技术解析与应用(构建日志、指标、APM统一观测平台)》下载
本书将从介绍Elasticsearch、全观测技术原理、行业应用到技术实践,全面系统地解读在大数据背景下,运维人员、开发人员等应用全观测技术的价值和实践上手指南。
453 0
《Elasticsearch全观测技术解析与应用(构建日志、指标、APM统一观测平台)》下载

相关产品

  • 检索分析服务 Elasticsearch版