使用阿里云Elasticsearch快速搭建智能运维系统

1、登录集群

1、在右侧远程桌面中打开浏览器，复制左侧云产品资源中提供的阿里云子用户名称和密码登录控制台。

2、复制如下阿里云Elasticsearch控制台地址至浏览器地址栏，登录Elasticsearch控制台。

说明：您可以在云产品资源列表查看已创建的资源信息，例如：IP地址、用户名、密码和资源所在地域等。

https://elasticsearch-cn-hangzhou.console.aliyun.com

说明:

本次实验已开通阿里云Elasticsearh6.8版本，仅做本次场景体验使用，如需作为测试环境或生产环境使用，可选择其他更高版本。

2、登录Kibana，开启自动创建索引功能

1. 在右侧概览页面Elasticsearch区域中，单击集群管理。
   
2. 在Elasticsearch实例列表中，单击实例ID。
   
3. 在左侧导航栏，选择配置与管理 > 可视化控制。
   
4. 在Kibana区域中，单击修改配置。
   
5. 开启Kibana私网访问，此变更过程需等待3-5分钟。
   
6. 返回上级页面，在Kibana区域中，单击公网入口。
   
7. 复制左侧云产品资源列表下的Elasticsearch登录名和Elasticsearch登录密码，至Kibana登录页面的账号和密码，单击登录。
   
8. 在登录成功页面，单击Explore on my own。
   

9. 在左侧导航栏，单击Dev Tools（开发工具），再单击Go to work。
   
10. 在Console页签下，执行如下命令，开启阿里云ES实例的自动创建索引功能。
    

PUT _cluster/settings
{
"persistent": {
"action.auto_create_index": "true" 
}
}

开启成功后，结果如下。

{
  "acknowledged" : true,
  "persistent" : {
    "action" : {
      "auto_create_index" : "true"
    }
  },
  "transient" : { }
}

3、使用Metricbeat采集ECS上的系统数据

1、返回阿里云Elasticsearch管理控制台，单击Beats数据采集 > 创建采集器。

2、在创建采集器窗口中，单击Metricbeat。

3、在系统弹出的确定服务授权对话框，单击确认，授权创建服务关联角色。

4、在采集器配置向导中，输入或选择采集器信息，复制左侧云产品资源列表下的Elasticsearch登录名和Elasticsearch登录密码，至用户名密码。

5、在metricbeat.yml中末尾添加如下脚本，单击下一步。

metricbeat.modules:
- module: system
  metricsets:
    - cpu             
    - load            
    - memory         
    - network        
    - process         
    - process_summary 
    - uptime          
    - socket_summary  
    - core
    - diskio 
    - filesystem
    - fsstat
  enabled: true
  period: 10s
  processes: ['.*']
  cpu.metrics:  ["percentages"]
  core.metrics: ["percentages"]

6、选择采集器安装的ECS实例。

7、启动采集器并查看采集器安装情况，此生效过程需等待3~5分钟。

1. 单击启动。启动成功后，系统弹出启动成功对话框。
   
2. 单击前往采集中心查看，在采集器管理区域中，查看启动成功的Metricbeat采集器，等待采集器状态变为已生效1/1。
   

8、返回Kibana页面，在左侧导航栏，单击Dev Tools（开发工具）。

9、在Console页签下，执行如下命令，查看索引。

GET _cat/indices?v

索引创建成功后，结果如下。

10、在左侧导航栏，单击Dashboard，搜索[Metricbeat System] Overview。

11、单击进入[Metricbeat System] Overview页面，再单击Host Overview，可查看监控仪表板。

4、使用Filebeat采集ECS上的Nginx服务数据

1. 返回阿里云Elasticsearch管理控制台 > Beats数据采集中心。
   
2. 在创建采集器区域，将鼠标移至Filebeat上，单击ECS日志。

3. 在采集器配置向导中，输入或选择采集器信息。完成后，单击下一步。

在填写Filebeat文件目录处，填写如下路径：

/var/log/nginx/

4. 在filebeat.yml中更改如下脚本。
   

在第24行enabled更改为true。

在第28行更改paths：

- /var/log/nginx/*.log

5、单击下一步，选择采集器安装的ECS实例。

6. 启动采集器并查看采集器安装情况，此生效过程需等待3~5分钟。
   

a.单击启动。启动成功后，系统弹出启动成功对话框。

b.单击前往采集中心查看，在采集器管理区域中，查看启动成功的Filebeat采集器，等待采集器状态变为已生效1/1。

c.返回Kibana页面，在左侧导航栏，单击Dev Tools（开发工具）。

d.在Console页签下，执行如下命令，查看索引。

GET _cat/indices?v

索引创建成功后，结果如下。

7、在左侧导航栏，单击Discover，点击选择filebeat，可查看采集的数据详情。