带你读《Elastic Stack 实战手册》之53:——3.5.12.Monitoring及Central Management (4)

简介: 带你读《Elastic Stack 实战手册》之53:——3.5.12.Monitoring及Central Management (4)

《Elastic Stack 实战手册》——三、产品能力——3.5 进阶篇——3.5.12.Monitoring及Central Management (3) https://developer.aliyun.com/article/1228349


Central Management


开发工具,包括一些可以方便用户和集群中数据进行交互探索分析的工具。

 

Console终端

 

使用 Elasticsearch 的 REST API 进行交互,包含发送请求和查看 API 文档。


image.png


如上图所示,在 console 里面执行类似 CRUL 的命令,点击语句后面的➡️执行,即可在右侧栏中实时查看结果:

 

1、支持 GET,PUT,POST,DELETE 四种命令。

2、支持包含写入,搜索,集群,节点和索引状态等等 Elasticsearch 相关的所有 API。

3、输入命令行时,支持自动补全。

4、支持自动格式化(Auto indent)。

5、支持查看 API 文档(Open documention)。

6、支持查看执行命令历史记录(点击History)。

7、设置 console 配置。

 

image.png

8、关闭 console:

 

在 Kibana 的配置文件 kibana.yml 配置如下:

 

console.enabled: false

 

然后重启 Kibana 即可。

 

查询分析器

 

检查并分析您的搜索查询。

 

Elasticsearch 具有功能强大的 Profile API,可用于检查和分析您的搜索查询。响应返回一个较大的JSON Blob,可能很难手动对其进行分析。


Search Profiler 工具可以将此 JSON 输出转换为易于浏览的可视化文件,从而使你可以更快地诊断和调试效果不佳的查询。

 

Query Profile


image.png



l 顶级BooleanQuery组件和 query 中 bool 相对应。

l 第二个BooleanQuery对应于条件查询,该条件在内部转换为一个Boolean 的 should 子句,它有两个子查询,分别与terms query中的 “sue” 和 “sally” 相对应。

l 在TermQuery标有 “name:fred” 这是对应于 match: fred 在查询中。

 

如图你可以看到每一行的 Self time 和 Total time 都是不一样的,Self time 表示查询组件执行所需的时间。Total time 是查询组件及其所有子组件执行所花费的时间。因此,诸如

Boolean queries 之类的查询的总时间通常比 Self time 长。

 

Aggregation

 

 

 

image.png


点击 Aggregation Profile 去查看聚合的性能统计信息,

 

选择 shard 查看聚合详细信息和时序分布。

 

Grok调试器

 

在数据处理管道中使用 grok 模式之前,请先对其进行构建和调试。

 

您可以在 Kibana Grok 调试器中构建和调试 grok 模式, 然后再在数据处理管道中使用它们。Grok 是一种模式匹配语法,可用于解析任意文本并对其进行结构化。Grok 非常适合解析 syslog,apache 和其他 Web 服务器日志,MySQL 日志,以及具备可读性的任何日志格式。

 

使用实例:

 

image.png


自定义模式:

 

如果默认的grok模式字典不包含你所需的模式,则可以使用Grok Debugger定义,测试和调试自定义模式。

image.png


Painless 实验室


实时实验和调试 Painless 脚本(beta功能)

 

此处不做过多的介绍。


采集管理

 

Logstash Pipelines管理

 

Logstash Pipelines 管理就是集中管理配置 Logstash pipeline,使其事件处理和结果调试可视化。

 

准备步骤如下:

 

l 安装对应版本的 Logstash(和 Elasticsearch 版本保持一致)

l 开启 Logstash 监控和集中管理

l 创建 Logstash Pipeline

l 验证 Pipelines 集中管理

 

安装 Logstash

 

#下载安装包
wget https://artifacts.elastic.co/downloads/logstash/logstash-7.10.0-linux-x86_64.tar.gz
#解压到指定目录下
tar -zxvf logstash-7.10.0-linux-x86_64.tar.gz -C /opt/
#启动安装包
cd /opt/logstash-7.10.0
./bin/logstash
第一次启动会启动失败,这个不用担心,因为没有对logstash进行任何配置。

开启监控和集中管理



开启 Logstash 监控的前提,请确保在 Elasticsearch 集群中启动xpack.monitoring.collection.enabled : true

 

通过 Kibana 启动方式如下:

 

image.png

《Elastic Stack 实战手册》——三、产品能力——3.5 进阶篇——3.5.12.Monitoring及Central Management (5) https://developer.aliyun.com/article/1228347

相关实践学习
以电商场景为例搭建AI语义搜索应用
本实验旨在通过阿里云Elasticsearch结合阿里云搜索开发工作台AI模型服务,构建一个高效、精准的语义搜索系统,模拟电商场景,深入理解AI搜索技术原理并掌握其实现过程。
ElasticSearch 最新快速入门教程
本课程由千锋教育提供。全文搜索的需求非常大。而开源的解决办法Elasricsearch(Elastic)就是一个非常好的工具。目前是全文搜索引擎的首选。本系列教程由浅入深讲解了在CentOS7系统下如何搭建ElasticSearch,如何使用Kibana实现各种方式的搜索并详细分析了搜索的原理,最后讲解了在Java应用中如何集成ElasticSearch并实现搜索。  
相关文章
|
8月前
|
机器学习/深度学习 人工智能 搜索推荐
信任重构与AI采信:Geo优化为何必须以官网优化为核心锚点?
当用户的问题不再仅仅指向一个网页链接,而是直接由AI模型合成一个权威、全面的答案时,企业面临的核心挑战已从“争夺排名”转变为“争夺AI的采信权”。
296 1
|
7月前
|
存储 人工智能 Serverless
替换一个节点,ComfyUI 瞬间起飞
FunArt是阿里云函数计算推出的ComfyUI一键托管平台,集成VisionPlaid等高性能DiT推理引擎,支持多卡序列并行、4-bit量化与异步Offload,在保持原生兼容前提下显著加速图像/视频生成,真正实现开箱即用、弹性高可用的AI生成服务。
基于模拟I2C协议驱动SD3078时钟芯片
基于模拟I2C协议驱动SD3078时钟芯片
|
7月前
|
人工智能 弹性计算 搜索推荐
无需 GPU!纯 CPU 跑通 AI 自动化:OpenClaw + 百炼 API 实测
无需GPU!纯CPU即可部署AI自动化工具OpenClaw,结合阿里云百炼API,支持轻量应用服务器、无影云电脑、ECS三种环境,9.9元起一键搞定。三步完成:选环境→装配置→赋任务,轻松打造专属AI助理。(239字)
703 3
|
8月前
|
运维 监控 安全
警惕Libvirt未授权访问漏洞:虚拟化环境的隐形安全隐患,运维人必看
Libvirt作为主流虚拟化管理工具,近期曝出严重未授权访问漏洞:若配置不当(如禁用TCP认证、暴露16509端口),攻击者无需密码即可远程操控虚拟机,导致业务中断、数据泄露、横向渗透等高危风险。本文详解漏洞成因、利用手法、危害及3步自查+实操整改方案,助力运维人员快速加固防线。(239字)
533 10
|
10月前
|
关系型数据库 数据库 PostgreSQL
PostgreSQL 16 本地开发环境极速搭建
本文提供一套高效、可复用的 PostgreSQL 16 本地开发环境搭建方案,基于 Docker Compose 实现30秒极速启动。包含自动初始化脚本、唯一约束设计、CRUD 操作指南与冲突处理策略,支持数据持久化与一键重置,助力开发者快速投入业务开发,告别环境配置难题。
|
10月前
|
机器人 物联网 定位技术
展厅机器人技术深度解析与主流产品选型指南
随着数字化转型,展厅机器人正从“科技噱头”迈向“智能服务”。本文深度解析语义SLAM、大模型交互、IoT联动三大核心技术,并对比猎户星空、优必选、科大讯飞、新松等主流产品,助您根据场景需求精准选型,实现高效、智能、沉浸式的展厅升级。
589 3
|
10月前
|
人工智能 缓存 运维
探秘 AgentRun|通过无代码创建的 Agent,如何用高代码进行更新?
阿里云函数计算 AgentRun 全新发布,推出“无代码快速创建+高代码深度定制”一体化方案。60秒上线首个Agent,开发者亦能一键转为高代码持续演进。支持多模型、工具集成与智能优化,助力企业实现从想法验证到生产落地的平滑升级,降低TCO达60%。
|
9月前
|
存储 NoSQL 关系型数据库
阿里云数据库产品介绍:关系型数据库、NoSQL数据库、数据库管理工具等产品类型与适用场景
阿里云推出了丰富多样的数据库产品,以满足不同行业、不同规模企业的多元化需求。本文为大家介绍阿里云的关系型数据库、NoSQL数据库、数据库管理工具、数据库平台与服务以及数据仓库等系列产品,探讨各产品的优势、应用场景以及数据库上云优选活动介绍。
1037 0
|
机器学习/深度学习 人工智能 算法
AI 基础知识从 0.4 到 0.5—— 计算机视觉之光 CNN
本文系统回顾了计算机视觉的发展历程,从早期基于手工特征的传统方法,到深度学习的崛起与卷积神经网络(CNN)的广泛应用,并通过数学原理、代码示例与可视化手段,全面解析了卷积操作的本质与CNN的架构设计。
986 33
AI 基础知识从 0.4 到 0.5—— 计算机视觉之光 CNN

热门文章

最新文章