带你读《Elastic Stack 实战手册》之53:——3.5.12.Monitoring及Central Management (4)

简介: 带你读《Elastic Stack 实战手册》之53:——3.5.12.Monitoring及Central Management (4)

《Elastic Stack 实战手册》——三、产品能力——3.5 进阶篇——3.5.12.Monitoring及Central Management (3) https://developer.aliyun.com/article/1228349


Central Management


开发工具,包括一些可以方便用户和集群中数据进行交互探索分析的工具。

 

Console终端

 

使用 Elasticsearch 的 REST API 进行交互,包含发送请求和查看 API 文档。


image.png


如上图所示,在 console 里面执行类似 CRUL 的命令,点击语句后面的➡️执行,即可在右侧栏中实时查看结果:

 

1、支持 GET,PUT,POST,DELETE 四种命令。

2、支持包含写入,搜索,集群,节点和索引状态等等 Elasticsearch 相关的所有 API。

3、输入命令行时,支持自动补全。

4、支持自动格式化(Auto indent)。

5、支持查看 API 文档(Open documention)。

6、支持查看执行命令历史记录(点击History)。

7、设置 console 配置。

 

image.png

8、关闭 console:

 

在 Kibana 的配置文件 kibana.yml 配置如下:

 

console.enabled: false

 

然后重启 Kibana 即可。

 

查询分析器

 

检查并分析您的搜索查询。

 

Elasticsearch 具有功能强大的 Profile API,可用于检查和分析您的搜索查询。响应返回一个较大的JSON Blob,可能很难手动对其进行分析。


Search Profiler 工具可以将此 JSON 输出转换为易于浏览的可视化文件,从而使你可以更快地诊断和调试效果不佳的查询。

 

Query Profile


image.png



l 顶级BooleanQuery组件和 query 中 bool 相对应。

l 第二个BooleanQuery对应于条件查询,该条件在内部转换为一个Boolean 的 should 子句,它有两个子查询,分别与terms query中的 “sue” 和 “sally” 相对应。

l 在TermQuery标有 “name:fred” 这是对应于 match: fred 在查询中。

 

如图你可以看到每一行的 Self time 和 Total time 都是不一样的,Self time 表示查询组件执行所需的时间。Total time 是查询组件及其所有子组件执行所花费的时间。因此,诸如

Boolean queries 之类的查询的总时间通常比 Self time 长。

 

Aggregation

 

 

 

image.png


点击 Aggregation Profile 去查看聚合的性能统计信息,

 

选择 shard 查看聚合详细信息和时序分布。

 

Grok调试器

 

在数据处理管道中使用 grok 模式之前,请先对其进行构建和调试。

 

您可以在 Kibana Grok 调试器中构建和调试 grok 模式, 然后再在数据处理管道中使用它们。Grok 是一种模式匹配语法,可用于解析任意文本并对其进行结构化。Grok 非常适合解析 syslog,apache 和其他 Web 服务器日志,MySQL 日志,以及具备可读性的任何日志格式。

 

使用实例:

 

image.png


自定义模式:

 

如果默认的grok模式字典不包含你所需的模式,则可以使用Grok Debugger定义,测试和调试自定义模式。

image.png


Painless 实验室


实时实验和调试 Painless 脚本(beta功能)

 

此处不做过多的介绍。


采集管理

 

Logstash Pipelines管理

 

Logstash Pipelines 管理就是集中管理配置 Logstash pipeline,使其事件处理和结果调试可视化。

 

准备步骤如下:

 

l 安装对应版本的 Logstash(和 Elasticsearch 版本保持一致)

l 开启 Logstash 监控和集中管理

l 创建 Logstash Pipeline

l 验证 Pipelines 集中管理

 

安装 Logstash

 

#下载安装包
wget https://artifacts.elastic.co/downloads/logstash/logstash-7.10.0-linux-x86_64.tar.gz
#解压到指定目录下
tar -zxvf logstash-7.10.0-linux-x86_64.tar.gz -C /opt/
#启动安装包
cd /opt/logstash-7.10.0
./bin/logstash
第一次启动会启动失败,这个不用担心,因为没有对logstash进行任何配置。

开启监控和集中管理



开启 Logstash 监控的前提,请确保在 Elasticsearch 集群中启动xpack.monitoring.collection.enabled : true

 

通过 Kibana 启动方式如下:

 

image.png

《Elastic Stack 实战手册》——三、产品能力——3.5 进阶篇——3.5.12.Monitoring及Central Management (5) https://developer.aliyun.com/article/1228347

相关实践学习
以电商场景为例搭建AI语义搜索应用
本实验旨在通过阿里云Elasticsearch结合阿里云搜索开发工作台AI模型服务,构建一个高效、精准的语义搜索系统,模拟电商场景,深入理解AI搜索技术原理并掌握其实现过程。
ElasticSearch 最新快速入门教程
本课程由千锋教育提供。全文搜索的需求非常大。而开源的解决办法Elasricsearch(Elastic)就是一个非常好的工具。目前是全文搜索引擎的首选。本系列教程由浅入深讲解了在CentOS7系统下如何搭建ElasticSearch,如何使用Kibana实现各种方式的搜索并详细分析了搜索的原理,最后讲解了在Java应用中如何集成ElasticSearch并实现搜索。  
相关文章
|
安全 网络协议
最新可靠好用的DNS服务器地址汇总
如果修改DNS服务器地址就可以访问google等服务,你还等什么?使用免费DNS解析服务除了去掉了运营商的各种广告,还有个最大的好处就是不会重定向或者过滤用户所访问的地址,这样就防止了很多网站被电信、网通劫持,有利于提供访问一些国外网站的成功率 如googlecode,网友应该养成不使用默认DNS的习惯,笔者汇总了常用可靠的DNS服务器地址。
18680 0
|
8月前
|
监控 安全 Java
别让技术债务拖垮你的系统!从识别、管控到清偿的完整落地手册
本文系统解析技术债务的本质、分类与管控:澄清其非“烂代码”,而是主动权衡;按Martin Fowler四象限与5大类型(代码/架构/测试/依赖/文档)精准识别;结合自动化扫描(SonarQube等)、ArchUnit架构校验与人工评审实现量化管理;提出童子军规则、测试先行重构、绞杀者模式等分层清偿策略,并强调融入全流程的长效机制。
685 3
|
9月前
|
机器学习/深度学习 人工智能 搜索推荐
信任重构与AI采信:Geo优化为何必须以官网优化为核心锚点?
当用户的问题不再仅仅指向一个网页链接,而是直接由AI模型合成一个权威、全面的答案时,企业面临的核心挑战已从“争夺排名”转变为“争夺AI的采信权”。
319 1
|
8月前
|
存储 人工智能 Serverless
替换一个节点,ComfyUI 瞬间起飞
FunArt是阿里云函数计算推出的ComfyUI一键托管平台,集成VisionPlaid等高性能DiT推理引擎,支持多卡序列并行、4-bit量化与异步Offload,在保持原生兼容前提下显著加速图像/视频生成,真正实现开箱即用、弹性高可用的AI生成服务。
|
9月前
|
运维 监控 安全
警惕Libvirt未授权访问漏洞:虚拟化环境的隐形安全隐患,运维人必看
Libvirt作为主流虚拟化管理工具,近期曝出严重未授权访问漏洞:若配置不当(如禁用TCP认证、暴露16509端口),攻击者无需密码即可远程操控虚拟机,导致业务中断、数据泄露、横向渗透等高危风险。本文详解漏洞成因、利用手法、危害及3步自查+实操整改方案,助力运维人员快速加固防线。(239字)
570 10
|
11月前
|
机器人 物联网 定位技术
展厅机器人技术深度解析与主流产品选型指南
随着数字化转型,展厅机器人正从“科技噱头”迈向“智能服务”。本文深度解析语义SLAM、大模型交互、IoT联动三大核心技术,并对比猎户星空、优必选、科大讯飞、新松等主流产品,助您根据场景需求精准选型,实现高效、智能、沉浸式的展厅升级。
652 3
|
11月前
|
关系型数据库 数据库 PostgreSQL
PostgreSQL 16 本地开发环境极速搭建
本文提供一套高效、可复用的 PostgreSQL 16 本地开发环境搭建方案,基于 Docker Compose 实现30秒极速启动。包含自动初始化脚本、唯一约束设计、CRUD 操作指南与冲突处理策略,支持数据持久化与一键重置,助力开发者快速投入业务开发,告别环境配置难题。
|
10月前
|
存储 NoSQL 关系型数据库
阿里云数据库产品介绍:关系型数据库、NoSQL数据库、数据库管理工具等产品类型与适用场景
阿里云推出了丰富多样的数据库产品,以满足不同行业、不同规模企业的多元化需求。本文为大家介绍阿里云的关系型数据库、NoSQL数据库、数据库管理工具、数据库平台与服务以及数据仓库等系列产品,探讨各产品的优势、应用场景以及数据库上云优选活动介绍。
1119 0
|
机器学习/深度学习 编解码 人工智能
90+目标跟踪算法&九大benchmark!基于判别滤波器和孪生网络的视觉目标跟踪:综述与展望(下)
视觉目标跟踪(VOT)是计算机视觉中的一个基本开放问题,任务是估计图像序列中目标的轨迹和状态。VOT具有广泛的应用,包括自动驾驶、机器人、智能视频监控、运动分析和医学成像。给定任意目标对象的初始状态,VOT中的主要挑战是学习在后续帧中搜索目标对象时使用的外观模型。近年来,由于引入了多种跟踪基准,如TrackingNet、VOT2018和GOT-10K,VOT受到了极大的关注。尽管最近取得了进展,VOT仍然是一个开放的研究问题,可能比以往任何时候都更加活跃。
90+目标跟踪算法&九大benchmark!基于判别滤波器和孪生网络的视觉目标跟踪:综述与展望(下)
|
机器学习/深度学习 计算机视觉 异构计算
经典神经网络 | GoogleNet 论文解析及代码实现
经典神经网络 | GoogleNet 论文解析及代码实现
经典神经网络 | GoogleNet 论文解析及代码实现

热门文章

最新文章