【Prometheus简介】

| 主机名称 | IP地址         | 安装组件                                            || -------- | ------------- | -------------------------------------------------- || docker1  | 192.168.1.100 | NodeEXporter、cAdvisor、Prometheus Server、Grafana || docker2  | 192.168.1.101 | NodeEXporter、cAdvisor                             || docker3  | 192.168.1.102 | NodeEXporter、cAdvisor                             |
全部关闭防火墙，禁用selinux。
需要部署的组件：
Prometheus Server: 普罗米修斯的主服务器。
NodeEXporter: 负责收集Host硬件信息和操作系统信息。
cAdvisor: 负责收集Host上运行的容器信息。
Grafana: 负责展示普罗米修斯监控界面。
##### 1）3个节点，全部部署node-EXporter,和cAdvisor.
//部署node-EXporter,收集硬件和系统信息。
docker run -d -p 9100:9100 --name exporter -v /proc:/host/proc -v /sys:/host/sys -v /:/rootfs --net=host prom/node-exporter --path.procfs /host/proc --path.sysfs /host/sys --collector.filesystem.ignored-mount-points "^/(sys|proc|dev|host|etc)($|/)"

//部署安装cAdvisor，收集节点容器信息。
docker run -v /:/rootfs:ro -v /var/run:/var/run/:rw -v /sys:/sys:ro -v /var/lib/docker:/var/lib/docker:ro -p8080:8080 --detach=true --name=cadvisor --net=host google/cadvisor

docker run -d -p 9090:9090 --name prometheus --net=host prom/prometheus
docker cp prometheus:/etc/prometheus/prometheus.yml /root
vim prometheus.yml
     - targets:['localhost:9090','localhost:8080','localhost:9100','192.168.1.101:8080','192.168.1.101:9100','192.168.1.102:8080','192.168.1.102:9100']

docker rm -f prometheus  容器名
//重新运行prometheus容器。
docker run -d -p 9090:9090 --name prometheus --net=host -v
/root/prometheus.yml:/etc/prometheus/prometheus.yml prom/prometheus

##### 3）在docker01上，部署grafana服务，用来展示prometheus收集到的数据。
mkdir /grafana-storage 
chmod 777 -R /grafana-storage/
docker run -d -p 3000:3000 --name grafana -v /grafana-storage:/var/lib/grafana -e
"GF_SECURITY_ADMIN_PASSWORD=123.com" grafana/grafana

grafana官网： https://grafana.com/ 
Grafana
Dashboards
Prometheus
Node Exporter for full
Download JSON
选中一款模板，然后，我们有2种方式可以套用这个模板。
**第一种方式：通过JSON文件使用模板。**
下载完成之后，来到grafana控制台
http://192.168.1.100:3000/datasources
点击左侧“+”，import ，upload JSON file

docker run --name alertmanager -d -p 9093:9093 prom/alertmanager:latest
docker cp alertmanager:/etc/alertmanager/alertmanager.yml /root
cp alertmanager.yml alertmanager.ymlbak
这里 AlertManager 默认启动的端口为 9093，启动完成后，浏览器访问 http://:9093 可以看到默认提供的 UI 页面，不过现在是没有任何告警信息的，因为我们还没有配置报警规则来触发报警。
URL：http://192.168.1.100:9093
AlertManager 配置邮件告警
AlertManager 默认配置文件为 alertmanager.yml，在容器内路为/etc/alertmanager/alertmanager.yml
docker cp alertmanager:/etc/alertmanager/alertmanager.yml /root/

[root@docker1 ~]# vim alertmanager.yml
global:
  resolve_timeout: 5m
  smtp_from: '1793594335@qq.com'
  smtp_smarthost: 'smtp.qq.com:465'
  smtp_auth_username: '1793594335@qq.com'
  smtp_auth_password: 'yuemqwmhdizdbjeg'
  smtp_require_tls: false
  smtp_hello: 'qq.com'
route:
  group_by: ['alertname']
  group_wait: 5s
  group_interval: 5s
  repeat_interval: 5m
  receiver: 'email'
receivers:
- name: 'email'
  email_configs:
  - to: '1793594335@qq.com'
    send_resolved: true
inhibit_rules:
  - source_match:
      severity: 'critical'
    target_match:
      severity: 'warning'
    equal: ['alertname', 'dev', 'instance']

[root@docker1 ~]# docker rm -f alertmanager 
[root@docker01 ~]# docker run -d --name alertmanager -p 9093:9093 -v
/root/alertmanager.yml:/etc/alertmanager/alertmanager.yml prom/alertmanager

# mkdir  -p /root/prometheus/rules
# cd /root/prometheus/rules/
[root@docker1 rules]# cat node-up.rules 
groups:
- name: node-up
  rules:
  - alert: node-up
    expr: up{job="prometheus"} == 0
    for: 15s
    labels:
      severity: 1
      team: node
    annotations:
      summary: "{{ $labels.instance }} 已停止运行超过 15s！"

# vim prometheus.yml
alerting:
  alertmanagers:
    - static_configs:
        - targets:
          - 192.168.1.100:9093
rule_files:
  - "/usr/local/prometheus/rules/*.rules"
PS:这里 rule_files 为容器内路径，需要将本地 node-up.rules 文件挂载到容器内指定路径，修改
Prometheus 启动命令如下，并重启服务。
[root@docker1 ~]# docker rm -f prometheus 
[root@docker1 ~]# docker run -d -p 9090:9090 -v
/root/prometheus.yml:/etc/prometheus/prometheus.yml -v/root/prometheus/rules:/usr/local/prometheus/rules --name prometheus --net=host prom/prometheus
此时在prometheus主页上可以看到相应规则
http://192.168.1.100:9090/targets
Status
Rules