性能监控神器Prometheus、Grafana、ELK 在springboot中的运用

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
Elasticsearch Serverless通用抵扣包,测试体验金 200元
可观测监控 Prometheus 版,每月50GB免费额度
简介: 【6月更文挑战第27天】在 Spring Boot 应用中,监控和日志管理是确保系统稳定性和性能的重要手段。

在 Spring Boot 应用中,监控和日志管理是确保系统稳定性和性能的重要手段。Prometheus、Grafana 和 ELK(Elasticsearch、Logstash、Kibana)是常用的开源监控和日志管理工具。以下是如何在 Spring Boot 应用中集成和使用这些工具的详细指南。

一、Prometheus 与 Grafana

Prometheus 是一个强大的时间序列数据库和监控系统,Grafana 是一个开源的可视化工具,常与 Prometheus 配合使用。

1.1 在 Spring Boot 中集成 Prometheus

  1. 添加依赖: 在 pom.xml 中添加 micrometerPrometheus 的依赖。
  2. xml复制代码
<dependency>
    <groupId>io.micrometer</groupId>
    <artifactId>micrometer-registry-prometheus</artifactId>
</dependency>
  1. 配置 Prometheus: 在 application.propertiesapplication.yml 文件中启用 Prometheus。
  2. properties复制代码
management.endpoints.web.exposure.include=*
management.metrics.export.prometheus.enabled=true
  1. 启动 Spring Boot 应用: 运行你的 Spring Boot 应用,并确保可以通过 /actuator/prometheus 端点访问 Prometheus 指标。例如,访问 http://localhost:8080/actuator/prometheus

1.2 在 Grafana 中配置 Prometheus 数据源

  1. 安装 Grafana: 按照 Grafana 的文档安装 Grafana。
  2. 添加 Prometheus 数据源
  • 打开 Grafana 并登录。
  • 进入 "Configuration" -> "Data Sources"。
  • 点击 "Add data source",选择 "Prometheus"。
  • 输入 Prometheus 的 URL(如 http://localhost:9090),然后点击 "Save & Test"。
  1. 创建仪表盘
  • 在 Grafana 中创建一个新的仪表盘。
  • 添加面板,并选择 Prometheus 作为数据源。
  • 配置 Prometheus 查询以获取所需的指标数据并进行可视化。

二、ELK(Elasticsearch、Logstash、Kibana)

ELK 是一个强大的日志管理和分析工具链,通常用于集中式日志管理和复杂的查询分析。

2.1 在 Spring Boot 中集成 ELK

  1. 添加依赖: 在 pom.xml 中添加 Spring Boot Starter LogbackELK 相关依赖。
  2. xml复制代码
<dependency>
    <groupId>net.logstash.logback</groupId>
    <artifactId>logstash-logback-encoder</artifactId>
    <version>6.6</version>
</dependency>
  1. 配置 Logback: 在 Spring Boot 项目中添加或修改 logback-spring.xml 文件,配置 Logstash appender。
  2. xml复制代码
<configuration>
    <appender name="logstash" class="net.logstash.logback.appender.LogstashTcpSocketAppender">
        <destination>localhost:5000</destination>
        <encoder class="net.logstash.logback.encoder.LoggingEventCompositeJsonEncoder">
            <providers>
                <timestamp>
                    <timeZone>UTC</timeZone>
                </timestamp>
                <message/>
                <loggerName/>
                <threadName/>
                <logLevel/>
                <logLevelValue/>
                <stackTrace/>
                <mdc/>
                <context/>
                <pattern>
                    <pattern>
                        {
                            "appname": "spring-boot-app",
                            "custom": {
                                "property1": "value1",
                                "property2": "value2"
                            }
                        }
                    </pattern>
                </pattern>
            </providers>
        </encoder>
    </appender>

    <root level="INFO">
        <appender-ref ref="logstash"/>
    </root>
</configuration>
  1. 配置 Logstash: 创建一个 Logstash 配置文件,如 logstash.conf,用于将日志数据发送到 Elasticsearch。
  2. 复制代码
input {
    tcp {
        port => 5000
        codec => json
    }
}

output {
    elasticsearch {
        hosts => ["http://localhost:9200"]
        index => "spring-boot-logs-%{+YYYY.MM.dd}"
    }
}
  1. 启动 Logstash 和 Elasticsearch: 按照官方文档安装并启动 Logstash 和 Elasticsearch,然后使用 logstash -f logstash.conf 启动 Logstash。

2.2 在 Kibana 中配置日志可视化

  1. 安装 Kibana: 按照 Kibana 的官方文档安装并启动 Kibana。
  2. 配置 Elasticsearch 数据源
  • 打开 Kibana 并登录。
  • 在 "Management" -> "Index Patterns" 中,创建一个新的索引模式,如 spring-boot-logs-*
  1. 创建可视化和仪表盘
  • 在 "Discover" 中查看日志数据。
  • 使用 "Visualize" 创建各种图表和图形。
  • 通过 "Dashboard" 将这些图表和图形组合到一个仪表盘中,实现日志数据的可视化展示。

总结

通过集成 Prometheus、Grafana 和 ELK,您可以实现对 Spring Boot 应用的全面监控和日志管理:

  • Prometheus 与 Grafana:主要用于应用性能监控、系统指标收集和可视化。
  • ELK:主要用于集中式日志管理、查询和分析。

这些工具的结合使用,可以显著提升系统的可观测性,帮助快速定位和解决问题,确保系统的稳定性和性能。

相关实践学习
以电商场景为例搭建AI语义搜索应用
本实验旨在通过阿里云Elasticsearch结合阿里云搜索开发工作台AI模型服务,构建一个高效、精准的语义搜索系统,模拟电商场景,深入理解AI搜索技术原理并掌握其实现过程。
ElasticSearch 最新快速入门教程
本课程由千锋教育提供。全文搜索的需求非常大。而开源的解决办法Elasricsearch(Elastic)就是一个非常好的工具。目前是全文搜索引擎的首选。本系列教程由浅入深讲解了在CentOS7系统下如何搭建ElasticSearch,如何使用Kibana实现各种方式的搜索并详细分析了搜索的原理,最后讲解了在Java应用中如何集成ElasticSearch并实现搜索。 &nbsp;
相关文章
|
5月前
|
Prometheus 监控 Cloud Native
Prometheus+Grafana(docker安装)
本文档详细介绍了如何使用Docker容器快速部署Prometheus监控系统和Grafana数据可视化平台。该方案适用于需要快速搭建监控环境的开发测试场景,具备部署简单、资源占用低、易于维护等特点。
|
9月前
|
存储 数据采集 Prometheus
Grafana Prometheus Altermanager 监控系统
Grafana、Prometheus 和 Alertmanager 是一套强大的开源监控系统组合。Prometheus 负责数据采集与存储,Alertmanager 处理告警通知,Grafana 提供可视化界面。本文简要介绍了这套系统的安装配置流程,包括各组件的下载、安装、服务配置及开机自启设置,并提供了访问地址和重启命令。适用于希望快速搭建高效监控平台的用户。
470 20
|
9月前
|
Prometheus 监控 Cloud Native
Prometheus+Grafana监控Linux主机
通过本文的步骤,我们成功地在 Linux 主机上使用 Prometheus 和 Grafana 进行了监控配置。具体包括安装 Prometheus 和 Node Exporter,配置 Grafana 数据源,并导入预设的仪表盘来展示监控数据。通过这种方式,可以轻松实现对 Linux 主机的系统指标监控,帮助及时发现和处理潜在问题。
753 7
|
9月前
|
Prometheus 监控 前端开发
Grafana 安装配置教程,让你的 Prometheus 监控数据变得更美观
《Grafana安装配置教程,让你的Prometheus监控数据变得更美观》简介: Grafana是一个开源的度量分析与可视化工具,支持多种数据源(如Prometheus),提供丰富的可视化功能和警报机制。本文详细介绍了Grafana的安装、汉化方法及模板使用,帮助用户轻松创建美观、灵活的数据面板,并实现数据的协作与共享。通过Docker镜像、配置文件修改或替换前端页面等方式实现汉化,让用户更便捷地使用中文界面。此外,还提供了导入JSON格式模板的具体步骤,方便快速搭建仪表盘。
831 2
|
3月前
|
Prometheus 监控 Cloud Native
云原生监控实战:Prometheus+Grafana快速搭建指南
云原生监控实战:Prometheus+Grafana快速搭建指南
|
3月前
|
存储 Prometheus 监控
OSS监控体系搭建:Prometheus+Grafana实时监控流量、错误码、存储量(开源方案替代云监控自定义视图)
本方案基于Prometheus构建OSS监控系统,涵盖架构设计、指标采集、可视化、告警及性能优化,助力企业实现高可用、低成本的自建监控体系。
366 1
|
4月前
|
Prometheus 监控 Cloud Native
除了Prometheus,还有哪些工具可以监控Docker Swarm集群的资源使用情况?
除了Prometheus,还有哪些工具可以监控Docker Swarm集群的资源使用情况?
361 79
|
3月前
|
存储 监控 Cloud Native
云原生监控实战:Prometheus+Grafana打造RDS多维度预警体系
本方案构建了基于Prometheus与Thanos的云原生RDS监控体系,涵盖数据采集、存储、可视化与告警全流程。支持10万+QPS采集、90%存储压缩,具备&lt;30秒告警延迟能力。通过自定义指标与智能预警策略,显著提升故障发现效率,实现分钟级响应。
272 5
|
3月前
|
Prometheus 监控 Cloud Native
|
2月前
|
Prometheus 监控 Cloud Native
Docker 部署 Prometheus 和 Grafana 监控 Spring Boot 服务
Docker 部署 Prometheus 和 Grafana 监控 Spring Boot 服务实现步骤

推荐镜像

更多