Python Logging 模块完全解读

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介: Python Logging 模块完全解读

Python 中的 logging 模块可以让你跟踪代码运行时的事件,当程序崩溃时可以查看日志并且发现是什么引发了错误。Log 信息有内置的层级——调试(debugging)、信息(informational)、警告(warnings)、错误(error)和严重错误(critical)。你也可以在 logging 中包含 traceback 信息。不管是小项目还是大项目,都推荐在 Python 程序中使用 logging。本文将简单清晰地介绍如何使用 logging 模块。


为什么使用 logging?



当你运行一个 Python 脚本时,你可能想要知道脚本的哪个部分在执行,并且检视变量的当前值。


通常,可以只使用 print() 打印出你想要的信息。在小程序中,可能靠这个就足够了。


但问题是,当你处理有很多个模块的大项目时,就需要一个更加灵活的方法。

为什么?


因为代码需要经历开发、调试、审查、测试或者上线等不同阶段。在开发时你想要打印的信息类型可能和上线后你想看到的信息类型完全不同。


也就是说,在“测试”时,你可能只想看警告和错误信息,然而在“调试”时,你可能还想看到跟调试相关的信息。


如果你还想打印出使用的模块以及代码运行的时间,那么你的代码很容易变得混乱。

使用 logging 模块,这些问题就能很容易地解决。


logging 模块可以:


  1. 控制信息层级,仅记录需要的信息。
  2. 控制显示或者保存日志的时机。
  3. 使用内置信息模板控制日志格式。
  4. 知晓信息来自于哪个模块。


基本 logging 例子



logging 模块是 Python 的标准库,要使用 logging,只需要使用 logging.basicConfig() 进行基本设置。事实上,这也是可选的。


然后就可以调用 logging.{level}(message) 在控制台中显示信息。


import logging
logging.basicConfig(level=logging.INFO)
def hypotenuse(a, b):
    """计算三角形斜边"""
    return (a**2 + b**2)**0.5
logging.info("{a}, {b} 的斜边是 {c}".format(a=3, b=4, c=hypotenuse(a=3, b=4)))
#> INFO:root:3, 4 的斜边是 5.0


打印出的日志信息遵循默认格式: {LEVEL}:{LOGGER}:{MESSAGE}


上面的例子中, LEVEL 就是 INFO,因为调用的是 logging.info()


LOGGERroot,因为这是默认 logger。


logger(日志记录器)类似于一个实体,你可以创建并配置它来记录不同类型和格式的消息。


你可以配置一个输出到控制台的 logger 和另一个将日志发送到文件的 logger,它们具有不同的日志记录级别,并且特定于给定模块。


最后,输出的信息就是我传递给 logging.info() 的字符串。


那么如果不设置 logging.basicConfig(level=logging.INFO) 会怎么样?


答案是 日志信息不会被打印出来


为什么?要知道这个需要先了解 logging 的级别。


logging 的 5 个级别



logging 有 5 个不同层次的日志级别,可以将给定的 logger 配置为这些级别:


  1. DEBUG:详细信息,用于诊断问题。Value=10。
  2. INFO:确认代码运行正常。Value=20。
  3. WARNING:意想不到的事情发生了,或预示着某个问题。但软件仍按预期运行。Value=30。
  4. ERROR:出现更严重的问题,软件无法执行某些功能。Value=40。
  5. CRITICAL:严重错误,程序本身可能无法继续运行。Value=50。


现在,让我们回答之前提出的问题。默认 logger 是 root,其默认的 basicConfig 级别是 WARNING。也就是说,只有来自 logging.warning或者更高级别的信息才会被记录下来。


因此,logging.info() 中的信息不会被打印出来。这也是为什么 basicConfig 被设为 INFO


如果级别使用 logging.ERROR 代替,只有来自 logging.errorlogging.critical 的信息会被记录。


import logging
logging.basicConfig(level=logging.ERROR)
def hypotenuse(a, b):
    """计算三角形斜边"""
    return (a**2 + b**2)**0.5
kwargs = {'a':3, 'b':4, 'c':hypotenuse(3, 4)}
logging.debug("a = {a}, b = {b}".format(**kwargs))
logging.info("{a}, {b} 的斜边是 {c}".format(**kwargs))
logging.warning("a={a} 和 b={b} 相等".format(**kwargs))
logging.error("a={a} 和 b={b} 不能为负".format(**kwargs))
logging.critical("{a}, {b} 的斜边是 {c}".format(**kwargs))
#> ERROR:root:a=3 和 b=4 不能为负
#> CRITICAL:root:3, 4 的斜边是 5.0


将日志记入文件



要从 root logger 将日志消息发送到文件,需要在 logging.basicConfig() 中设置 file 参数:


import logging
logging.basicConfig(level=logging.INFO, filename='sample.log')


现在,所有后续日志消息都将直接记录到当前工作目录中的“sample.log“文件。如果要将其记录到另一个目录中的文件,请给出完整的文件路径。


如何更改 logging 格式



logging 模块提供了向日志消息添加各种详细信息的速记表。


微信图片_20220429121541.jpg


fig


让我们更改日志信息格式以显示 TIMELEVELMESSAGE


import logging
logging.basicConfig(level=logging.INFO, format='%(asctime)s :: %(levelname)s :: %(message)s')
logging.info("当当当!")
#> 2019-03-10 19:41:09,057 :: INFO :: 当当当!


不要对所有模块使用 root logger


让我们看下面的代码:


# 1. myprojectmodule.py
import logging
logging.basicConfig(filename='module.log')
#-----------------------------
# 2. main.py (从 myprojectmodule.py 导入代码)
import logging
import myprojectmodule  # 运行 myprojectmodule.py 中的代码,将生成 `module.log` 文件
logging.basicConfig(filename='main.log')  # 无效!


如果项目中有一个或多个模块。这些模块使用基本根模块。然后,当导入模块 myprojectmodule.py 时,将运行该模块的所有代码并配置 logger。


一旦配置好,main 文件中的 root logger 将不能再更改 root logger 设置。因为,一旦设置好 logging.basicConfig(),就不能再更改它。


如果想在不同文件中使用不同 logger,就需要创建一个新的 logger。


如何创建一个新的 logger?



可以使用 logger.getLogger(name) 方法创建一个新的 logger。


如果存在同名的 logger,则将使用该 logger。


可以给 logger 取任何名字,但是通常使用 __name__ 变量。

相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
相关文章
|
8天前
|
Python
在Python中,可以使用内置的`re`模块来处理正则表达式
在Python中,可以使用内置的`re`模块来处理正则表达式
21 5
|
18天前
|
Java 程序员 开发者
Python的gc模块
Python的gc模块
|
21天前
|
数据采集 Web App开发 JavaScript
python-selenium模块详解!!!
Selenium 是一个强大的自动化测试工具,支持 Python 调用浏览器进行网页抓取。本文介绍了 Selenium 的安装、基本使用、元素定位、高级操作等内容。主要内容包括:发送请求、加载网页、元素定位、处理 Cookie、无头浏览器设置、页面等待、窗口和 iframe 切换等。通过示例代码帮助读者快速掌握 Selenium 的核心功能。
64 5
|
25天前
|
Python
SciPy 教程 之 SciPy 模块列表 6
SciPy教程之常量模块介绍:涵盖公制、二进制(字节)、质量、角度、时间、长度、压强、体积、速度、温度、能量、功率及力学单位。示例展示了角度单位转换为弧度的几个常用常量。
19 7
|
25天前
|
Python
SciPy 教程 之 SciPy 模块列表 7
`scipy.constants` 模块提供了常用的时间单位转换为秒数的功能。例如,`constants.hour` 返回 3600.0 秒,表示一小时的秒数。其他常用时间单位包括分钟、天、周、年和儒略年。
17 6
|
22天前
|
Python
SciPy 教程 之 SciPy 模块列表 13
SciPy教程之SciPy模块列表13:单位类型。常量模块包含多种单位,如公制、二进制(字节)、质量、角度、时间、长度、压强、体积、速度、温度、能量、功率和力学单位。示例代码展示了如何使用`constants`模块获取零摄氏度对应的开尔文值(273.15)和华氏度与摄氏度的转换系数(0.5556)。
17 1
|
23天前
|
XML 前端开发 数据格式
超级详细的python中bs4模块详解
Beautiful Soup 是一个用于从网页中抓取数据的 Python 库,提供了简单易用的函数来处理导航、搜索和修改分析树。支持多种解析器,如 Python 标准库中的 HTML 解析器和更强大的 lxml 解析器。通过简单的代码即可实现复杂的数据抓取任务。本文介绍了 Beautiful Soup 的安装、基本使用、对象类型、文档树遍历和搜索方法,以及 CSS 选择器的使用。
53 1
|
24天前
|
Python
SciPy 教程 之 SciPy 模块列表 9
SciPy教程之常量模块介绍,涵盖多种单位类型,如公制、质量、角度、时间、长度、压强等。示例展示了如何使用`scipy.constants`模块查询不同压强单位对应的帕斯卡值,包括atm、bar、torr、mmHg和psi。
14 1
|
24天前
|
Python
SciPy 教程 之 SciPy 模块列表 8
SciPy教程之常量模块单位类型介绍。该模块包含多种单位,如公制、质量、角度、时间、长度、压强、体积、速度、温度、能量、功率和力学单位。示例展示了部分长度单位的转换值,例如英寸、英尺、海里等。
15 1
|
26天前
|
知识图谱 Python
SciPy 教程 之 SciPy 模块列表 5
本教程介绍SciPy常量模块中的单位类型,涵盖公制、质量、时间、长度等单位。示例代码展示了如何使用`scipy.constants`模块获取不同质量单位的千克值,如公吨、磅、盎司、原子质量单位等。
15 1