你的应用是不是只有service_stdout.log?

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介: 本文记录了logback-spring.xml文件不生效问题的整体排查思路。

一、背景

近期遇到同组同反馈logback-spring.xml文件不生效的问题,由于本人很久没申请过新应用,所以对于配置类的事宜有点陌生(大部分是应用交接维护,直接使用log也没过多关注配置,知道大概但细节有点脱节,虚了),导致自己在排查阶段花了很长时间,本文记录了整个排查思路,包括logback配置、不生效的原因分析等,希望给大家提供一些经验参考。


1.1 Logback简介

SLF4J(Simple Logging Facade for Java)是一个Java的日志API的简单门面,它提供了一个简单统一的记录日志的接口,而具体的日志实现则可以通过不同的日志库来完成。

Logback是一个日志库,Logback被设计为能够与SLF4J无缝集成,也可替代SLF4J,因为Logback的开发者之一是SLF4J的创始人。


二、logback配置

因为pandora-boot默认集成logback,不需要额外logback依赖。


2.1 配置姿势

官方推荐使用logback,排查思路均以logback不生效为主线。

1)指定配置文件路径 image.png

application.properties添加配置项logging.config=classpath:logback-spring.xml

2)自定义配置文件

<?xml version="1.0" encoding="UTF-8"?>
<configuration scan="true">
    <!-- https://github.com/spring-projects/spring-boot/blob/v1.5.13.RELEASE/spring-boot/src/main/resources/org/springframework/boot/logging/logback/defaults.xml -->
    <include resource="org/springframework/boot/logging/logback/defaults.xml" />
    <property name="APP_NAME" value="xxxx" />
    <property name="LOG_PATH" value="${user.home}/logs/eleme/${APP_NAME}/" />
    <property name="LOG_FILE" value="${LOG_PATH}/application.log" />
    <property name="ERROR_LOG_FILE" value="${LOG_PATH}/common-error.log"/>
    <property name="TRACE_FILE_LOG_PATTERN" value="[%X{requestId}][%X{rpcId}] -%green(%d{yyyy-MM-dd HH:mm:ss.SSS}) ${LOG_LEVEL_PATTERN:-%5p} %magenta(${PID:- }) --- [%t] %-40.40logger{39} : %m%n${LOG_EXCEPTION_CONVERSION_WORD:-%wEx}"/>
    <property name="ERROR_FILE_LOG_PATTERN_D"
              value="${ERROR_FILE_LOG_PATTERN_D:-%d{yyyy-MM-dd HH:mm:ss.SSS} ${LOG_LEVEL_PATTERN:-%5p} [%X{requestId}] [%X{rpcId}][traceId:%X{EAGLEEYE_TRACE_ID}][%c{2}#%M] %logger{39} : %m%n${LOG_EXCEPTION_CONVERSION_WORD:-%wEx}}"/>

    <appender name="APPLICATION"
              class="ch.qos.logback.core.rolling.RollingFileAppender">
        <file>${LOG_FILE}</file>
        <encoder>
            <pattern>${TRACE_FILE_LOG_PATTERN}</pattern>
        </encoder>
        <rollingPolicy class="ch.qos.logback.core.rolling.SizeAndTimeBasedRollingPolicy">
            <fileNamePattern>${LOG_FILE}.%d{yyyy-MM-dd}.%i.log</fileNamePattern>
            <maxHistory>7</maxHistory>
            <maxFileSize>50MB</maxFileSize>
            <totalSizeCap>20GB</totalSizeCap>
        </rollingPolicy>
    </appender>

    <appender name="ERROR_APPENDER"
              class="ch.qos.logback.core.rolling.RollingFileAppender">
        <file>${ERROR_LOG_FILE}</file>
        <encoder>
            <pattern>${ERROR_FILE_LOG_PATTERN_D}</pattern>
        </encoder>
        <rollingPolicy class="ch.qos.logback.core.rolling.SizeAndTimeBasedRollingPolicy">
            <fileNamePattern>${ERROR_LOG_FILE}.%d{yyyy-MM-dd}.%i.log</fileNamePattern>
            <maxHistory>7</maxHistory>
            <maxFileSize>50MB</maxFileSize>
            <totalSizeCap>20GB</totalSizeCap>
        </rollingPolicy>
        <filter class="ch.qos.logback.classic.filter.LevelFilter">
            <level>ERROR</level>
            <onMatch>ACCEPT</onMatch>
            <onMismatch>DENY</onMismatch>
        </filter>
    </appender>

    <appender name="CONSOLE" class="ch.qos.logback.core.ConsoleAppender">
        <encoder>
            <pattern>${TRACE_CONSOLE_LOG_PATTERN}</pattern>
            <charset>utf8</charset>
        </encoder>
    </appender>

    <root level="INFO">
<!--        <appender-ref ref="CONSOLE" />-->
        <appender-ref ref="APPLICATION" />
        <appender-ref ref="ERROR_APPENDER" />
    </root>
</configuration>


2.2 配置可能遇到的一些问题

1)自定义变量不生效?

如果引用外部的变量,只有几个变量适用,比如${PID}、${LOG_FILE}、${LOG_PATH}、${LOG_EXCEPTION_CONVERSION_WORD},其它变量建议定义成property才能正常使用。如上文中的APP_NAME


2)如何看更多报错信息?


可以在启动时加上`-Dlog4j.defaultInitOverride=true`


2.3 完成配置后未生效表象

按照如上配置后,可能出现自定义的Appender不生效,即指定目录下只有service_stdout.log,无自定义的file配置。

image.png

所有的文件都会输出到service_stdout.log,因为在appctl.sh中,默认start_pandora_boot方法中已指定输出到"$SERVICE_OUT" 2>&1 "&" ,这里是无问题,核心在于自定义的logback-spring.xml如何分发。


三、不生效原因分析


3.1、远程debug

  • 首先要开启远程debug,
    JPDA_OPTS="-agentlib:jdwp=transport=$JPDA_TRANSPORT,address=$JPDA_ADDRESS,server=y,suspend=$JPDA_SUSPEND"
  • idea启动Remote JVM Debug


3.2、查看logback appender

执行命令LoggerFactory.getLogger("ROOT"),查看ROOT下的aai(AppenderAttachableImpl作用是管理和处理与日志记录器相关联的多个Appender对象),发现并不是logback-spring.xml自己定义的Appender对象,意味着被覆盖或优先级有所不同。

image.png


这里也走了弯路,不断debug源码找问题,包括org.springframework.boot.context.logging.LoggingApplicationListener#initialize其中logback-spring.xml已被加载。

image.png

回头看了下官方文档,提示可能包冲突导致的问题。


3.3 排查日志冲突问题

image.png

牢记官方这个图的顺序:

  • 理论上使用logback,就要排除SLF4J-Log4j12
  • 因为jcl-over-slf4j commons-logging冲突, 需要排除commons-logging

如果跟pom无冲突, 子pom.xml也要排除,使用Dependency Analyzer事半功倍。

image.png

排除过程中采用最小原则,避免影响其它业务代码。


3.4 double check

执行命令LoggerFactory.getLogger("ROOT"),再次查看ROOT实例下的aai

image.png

与`logback-spring.xml`定义的appender一样, 同时定义的file也被正常初始化了。

image.png

四、总结

1、仔细阅读spring-boot官方文档,自己踩过的坑绝不是独一无二的。

2、引入二方包时养成最小原则,善用exclusion(虽然这只是美好愿望,希望排查时不要泪两行)。

参考文章:

PandoraBoot文档: https://mw.alibaba-inc.com/products/pandoraboot/_book/log-config.html



来源  |  阿里云开发者公众号
作者  |  
率领






相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
相关文章
|
1月前
|
机器学习/深度学习 存储 监控
Elasticsearch 在日志分析中的应用
【9月更文第2天】随着数字化转型的推进,日志数据的重要性日益凸显。日志不仅记录了系统的运行状态,还提供了宝贵的洞察,帮助企业改进产品质量、优化用户体验以及加强安全防护。Elasticsearch 作为一个分布式搜索和分析引擎,因其出色的性能和灵活性,成为了日志分析领域的首选工具之一。本文将探讨如何使用 Elasticsearch 作为日志分析平台的核心组件,并详细介绍 ELK(Elasticsearch, Logstash, Kibana)栈的搭建和配置流程。
194 4
|
1月前
|
设计模式 SQL 安全
PHP中的设计模式:单例模式的深入探索与实践在PHP的编程实践中,设计模式是解决常见软件设计问题的最佳实践。单例模式作为设计模式中的一种,确保一个类只有一个实例,并提供全局访问点,广泛应用于配置管理、日志记录和测试框架等场景。本文将深入探讨单例模式的原理、实现方式及其在PHP中的应用,帮助开发者更好地理解和运用这一设计模式。
在PHP开发中,单例模式通过确保类仅有一个实例并提供一个全局访问点,有效管理和访问共享资源。本文详细介绍了单例模式的概念、PHP实现方式及应用场景,并通过具体代码示例展示如何在PHP中实现单例模式以及如何在实际项目中正确使用它来优化代码结构和性能。
37 2
|
2月前
|
弹性计算 缓存 监控
基于“日志审计应用”的 DNS 日志洞察实践
DNS 解析日志是一种记录 DNS 请求和响应的基础信息,监控 DNS 服务可以帮助用户识别网络活动并保持系统安全。日志审计服务支持采集 DNS 内网解析日志、公网权威解析日志、GTM 日志。理解 DNS 日志的字段含义,洞察 DNS 日志背后所代表的网络信息,既可以帮助发现和诊断 DNS 解析相关的问题,还可以检测和识别潜在的安全威胁。
8123 13
|
2月前
|
Java 应用服务中间件 HSF
Java应用结构规范问题之配置Logback以仅记录错误级别的日志到一个滚动文件中的问题如何解决
Java应用结构规范问题之配置Logback以仅记录错误级别的日志到一个滚动文件中的问题如何解决
|
2月前
|
Java 应用服务中间件 HSF
Java应用结构规范问题之配置Logback以在控制台输出日志的问题如何解决
Java应用结构规范问题之配置Logback以在控制台输出日志的问题如何解决
|
2月前
|
Java 应用服务中间件 HSF
Java应用结构规范问题之AllLoggers接口获取异常日志的Logger实例的问题如何解决
Java应用结构规范问题之AllLoggers接口获取异常日志的Logger实例的问题如何解决
|
2月前
|
存储 Kubernetes 监控
在Docker中,很多应用容器都是默认后台运行的,怎么查看它们的输出和日志信息?
在Docker中,很多应用容器都是默认后台运行的,怎么查看它们的输出和日志信息?
|
2月前
|
消息中间件 监控 搜索推荐
OpenFeign日志组件Logger原理与应用
该文章详细解释了如何在OpenFeign中配置并使用请求和响应的GZIP压缩功能。
|
2月前
|
人工智能 数据库连接 Go
Golang 搭建 WebSocket 应用(五) - 消息推送日志
Golang 搭建 WebSocket 应用(五) - 消息推送日志
28 1
|
2月前
|
存储 Kubernetes 网络安全
[k8s]使用nfs挂载pod的应用日志文件
[k8s]使用nfs挂载pod的应用日志文件
134 1