使用阿里云Elasticsearch快速搭建智能运维系统体验报告

本文涉及的产品
检索分析服务 Elasticsearch 版,2核4GB开发者规格 1个月
云服务器 ECS,每月免费额度200元 3个月
云服务器ECS,u1 2核4GB 1个月
简介: Elasticsearch搭建平台,并创建采集器。

使用阿里云Elasticsearch快速搭建智能运维系统体验报告

1、先创建资源,登陆控制台

image.png

2、登陆阿里云Elasticsearch控制台

https://elasticsearch-cn-hangzhou.console.aliyun.com

image.png

3、单击集群管理。

image.png

4、点击实例id

image.png

5、选择 配置与管理 > 可视化控制

image.png

6、在Kibana区域中,单击修改配置

image.png

image.png

7、开启Kibana私网访问,此变更过程需等待3-5分钟

image.png

image.png

8、在Kibana区域中,单击公网入口,出现登陆界面

image.png

使用左侧帐号密码登陆

image.pngimage.png

9、在登录成功页面,单击Explore on my own

image.png

10、在左侧导航栏,单击Dev Tools(开发工具),再单击Go to work

image.png

image.png

11、在Console页签下,执行如下命令,开启阿里云ES实例的自动创建索引功能。

PUT _cluster/settings { "persistent": { "action.auto_create_index": "true"  } }

image.png

image.png

二、使用Metricbeat采集ECS上的系统数据

1、阿里云Elasticsearch管理控制台,单击Beats数据采集 > 创建采集器。

image.png

2、在创建采集器窗口中,单击Metricbeat

image.png

3、在采集器配置向导中,输入或选择采集器信息,复制左侧云产品资源列表下的Elasticsearch登录名Elasticsearch登录密码,至用户名密码。

image.pngimage.png

4、在metricbeat.yml中末尾添加如下脚本,单击下一步

metricbeat.modules:

- module: system

 metricsets:

   - cpu            

   - load            

   - memory        

   - network        

   - process        

   - process_summary

   - uptime          

   - socket_summary  

   - core

   - diskio

   - filesystem

   - fsstat

 enabled: true

 period: 10s

 processes: ['.*']

 cpu.metrics:  ["percentages"]

 core.metrics: ["percentages"]

image.png

5、选择采集器安装的ECS实例。

image.png

6、启动采集器并查看采集器安装情况,此生效过程需等待3~5分钟。

  1. 单击启动。启动成功后,系统弹出启动成功对话框。
  2. 单击前往采集中心查看,在采集器管理区域中,查看启动成功的Metricbeat采集器,等待采集器状态变为已生效1/1。

image.png

image.png

image.png

7、返回Kibana页面,在左侧导航栏,单击Dev Tools(开发工具)

  1. 在Console页签下,执行如下命令,查看索引。

   GET _cat/indices?v

image.png

image.png

8、单击进入[Metricbeat System] Overview页面,再单击Host Overview,可查看监控仪表板。

image.png

三、使用Filebeat采集ECS上的Nginx服务数据

1、返回阿里云Elasticsearch管理控制台 > Beats数据采集中心

image.png

2、在创建采集器区域,将鼠标移至Filebeat上,单击ECS日志

image.png

3、在采集器配置向导中,输入或选择采集器信息。完成后,单击下一步

image.png

4、在filebeat.yml中更改如下脚本。

   在第24行enabled更改为true。

   在第28行更改paths:

image.png

5、选择采集器安装的ECS实例。

image.png

6、 启动采集器并查看采集器安装情况,此生效过程需等待3~5分钟。

  1. 单击启动。启动成功后,系统弹出启动成功对话框。
  2. 单击前往采集中心查看,在采集器管理区域中,查看启动成功的Filebeat采集器,等待采集器状态变为已生效1/1。
  3. 返回Kibana页面,在左侧导航栏,单击Dev Tools(开发工具)
  4. 在Console页签下,执行如下命令,查看索引。

image.png

image.png

image.png

7、在左侧导航栏,单击Discover,点击选择filebeat,可查看采集的数据详情。

image.png

相关实践学习
使用阿里云Elasticsearch体验信息检索加速
通过创建登录阿里云Elasticsearch集群,使用DataWorks将MySQL数据同步至Elasticsearch,体验多条件检索效果,简单展示数据同步和信息检索加速的过程和操作。
ElasticSearch 入门精讲
ElasticSearch是一个开源的、基于Lucene的、分布式、高扩展、高实时的搜索与数据分析引擎。根据DB-Engines的排名显示,Elasticsearch是最受欢迎的企业搜索引擎,其次是Apache Solr(也是基于Lucene)。 ElasticSearch的实现原理主要分为以下几个步骤: 用户将数据提交到Elastic Search 数据库中 通过分词控制器去将对应的语句分词,将其权重和分词结果一并存入数据 当用户搜索数据时候,再根据权重将结果排名、打分 将返回结果呈现给用户 Elasticsearch可以用于搜索各种文档。它提供可扩展的搜索,具有接近实时的搜索,并支持多租户。
目录
相关文章
|
20天前
|
运维 Kubernetes 监控
构建高效自动化运维系统:基于容器技术的策略与实践
【4月更文挑战第19天】随着云计算和微服务架构的兴起,传统的运维模式正逐渐向自动化、智能化转型。本文将探讨如何利用容器技术构建一个高效、可靠的自动化运维系统,涵盖系统设计原则、关键技术选型以及实践经验分享。通过引入容器技术,我们可以实现应用的快速部署、弹性伸缩和故障自愈,从而提高运维效率,降低系统维护成本。
|
10天前
|
运维 监控 安全
构建高效自动化运维系统:策略与实践
【4月更文挑战第29天】 在信息技术日新月异的今天,高效的运维管理已成为企业保持竞争力的关键因素。本文将探讨如何构建一个能够适应快速变化需求的自动化运维系统。通过深入分析自动化工具的选择、配置管理的最佳实践以及持续集成和部署的策略,我们旨在为读者提供一个清晰的框架来优化他们的运维流程。文章的核心在于提出一种结合了最新技术和思维模式的综合解决方案,以实现运维工作的最优化。
|
2天前
|
存储 数据可视化 数据建模
阿里云大佬叮嘱我务必要科普这个 Elasticsearch API
阿里云大佬叮嘱我务必要科普这个 Elasticsearch API
10 0
|
5天前
|
机器学习/深度学习 人工智能 运维
智能化运维:AIOps在未来网络管理中的应用与挑战
【5月更文挑战第4天】随着人工智能和大数据技术的飞速发展,智能化运维(AIOps)正逐渐成为IT运维领域的革新力量。本文探讨了AIOps在现代网络管理中的关键作用,分析了其在故障预测、自动化处理、以及提升决策效率方面的潜力。同时,文章还针对AIOps实施过程中面临的技术挑战、数据隐私及安全性问题进行了深入讨论,并提出了相应的解决策略。通过实际案例分析,本文旨在为读者提供一个关于AIOps在网络管理领域应用的全面视角。
|
6天前
|
运维 算法 物联网
五大智能运维场景
【5月更文挑战第3天】智能运维场景分5类:异常检测、根因诊断、故障自愈、事件预警、效能优化。
|
9天前
|
运维 Kubernetes 持续交付
构建高效自动化运维系统:基于容器技术的持续集成与持续部署实践
【4月更文挑战第30天】 在快速发展的云计算时代,传统的运维模式已无法满足敏捷开发和快速迭代的需求。本文将介绍如何利用容器技术搭建一套高效自动化运维系统,实现软件的持续集成(CI)与持续部署(CD)。文章首先探讨了现代运维面临的挑战,接着详细阐述了容器技术的核心组件和工作原理,最后通过实际案例展示了如何整合这些组件来构建一个可靠、可扩展的自动化运维平台。
|
9天前
|
运维 监控 安全
构建高效自动化运维系统:策略与实践
【4月更文挑战第30天】 在现代IT基础设施管理中,自动化运维不再是可选项而是必需品。随着复杂性的增加和变更的频繁性,自动化可以提高效率、减少错误并释放人员专注于更有价值的任务。本文将探讨构建一个高效的自动化运维系统的关键环节,包括工具选择、流程设计以及监控和优化策略。通过案例分析和最佳实践分享,读者可以获得实施自动化运维的实用指导和启发。
|
10天前
|
机器学习/深度学习 人工智能 运维
构建高效自动化运维系统的策略与实践
【4月更文挑战第29天】 在数字化转型的浪潮中,企业IT基础设施变得日益复杂多变。传统的手动运维方式已无法满足快速响应和高效率的需求。本文将探讨如何通过一系列策略和技术手段构建一个高效的自动化运维系统。首先,分析当前自动化运维的必要性及其带来的益处;接着,详细阐述自动化运维的核心组件、工具选择以及实施步骤;最后,通过案例分析展示自动化运维在实际环境中的应用效果,并讨论面临的挑战及未来发展趋势。
|
10天前
|
消息中间件 运维 监控
基于SaaS云部署、云计算的区域医院云HIS系统源码(运维管理+运营管理+综合监管)
医院云his系统采用主流成熟技术开发,B/S架构,软件结构简洁、代码规范易阅读,SaaS应用,全浏览器访问,前后端分离,多服务协同,服务可拆分,功能易扩展。多医院统一登录患者主索引建立、主数据管理,统一对外接口管理。
28 1
|
11天前
|
存储 运维 监控
构建高效可靠的自动化运维系统
【4月更文挑战第28天】 随着信息技术的快速发展,企业对于信息系统的管理和维护要求越来越高。传统的手工运维方式已经难以满足现代企业的需求,因此自动化运维成为了一种趋势。本文将介绍构建高效可靠自动化运维系统的方法和技术,包括自动化工具的选择、配置管理、监控告警等方面的内容。通过本文的阅读,读者可以了解到如何利用自动化技术提高运维效率,降低人为错误的发生,从而实现企业的高效稳定运行。

热门文章

最新文章