『无为则无心』Python日志 — 64、Python日志模块logging介绍
1、日志的作用
从事与软件相关工作的人,应该都听过“日志”一词。
日志就是跟踪软件运行时事件的方法,为了能够在程序运行过程中记录错误。
通过日志记录程序的运行,方便我们查询信息,以便追踪问题、进行维护和调试、还是数据分析。
并且各编程语言都形成了各自的日志体系和相应的框架。
日志的作用总结:
- 程序调试。
- 了解软件程序运行情况是否正常。
- 软件程序运行故障分析与问题定位。
2、为什么需要写日志
首先我们要树立一个观点,那就是“不是为了记录日志而记录日志,日志也不是随意记的”。要实现能够只通过日志文件还原整个程序执行的过程,达到能透明地看到程序里执行情况,每个线程每个过程到底执行结果的目的。日志就像飞机的黑匣子一样,应当能够复原异常的整个现场乃至细节。
在项目中,日志这个功能非常重要,我们要重视起来。
- 我们要知道日志能用来干什么,能干到什么程度。
- 要知道日志框架的使用方法和配置方式。
- 要知道什么地方该进行日志记录。
- 要知道进行什么级别的日志记录。
- 日志中该写些什么内容。
3、Python中的日志处理
(1)logging模块介绍
在Python中,使用logging
模块来进行日志的处理。
logging
是Python的内置模块,主要用于将日志信息进行格式化内容输出,可将格式化内容输出到文件,也可输出到屏幕。
我们在开发过程中,常用print()
函数来进行调试,但是在实际应用的部署时,我们要将日志信息输出到文件中,方便后续查找以及备份。
在我们使用日志管理时,我们也可以将日志格式化成Json对象转存到ELK中方便图形化查看及管理。
(2)logging模块的四大组件
logging
模块将日志系统从高向低依次定义了四个类,分别是logger
(日志器)、handler
(处理器)、filter
(过滤器)和formatter
(格式器)。其中由日志器生成的实例将接管原本日志记录函数logging.log
的功能。
组件 | 说明 |
---|---|
logger |
提供应用程序代码直接使用的接口。 |
handler |
用于将日志记录发送到指定的目的位置。 |
formatter |
用于控制日志信息的最终输出格式,格式化输出。 |
filter |
提供更细粒度的日志过滤功能,用于决定哪些日志记录将会被输出(其它的日志记录将会被忽略)。 |
说明:
Logger
:用于记录日志的对象。
工作流程如下:
1、判断需要记录的日志level
是否满足当前logger
对象设置的level
等级要求。
比如logger
设置的level
是Info
,记录时使用的logger.debug
,那么就会不满足,所以不会记录日志。
2、查看logger
的filter
过滤器是否满足。
3、filter
通过之后,交给logger
的handler
来记录日志,一个logger
是可以设置多个handler
。
注意:在整个应用中可以有多个logger
,使用logging.getLogger
时通过指定name
来获取对象,实际logging
中还存在一个Manager
类,由Manager
来进行多logger
的单例模式管理。Handler
:用于记录日志到具体的文件、输出流或其他的管道。
功能如下:
1、查看记录日志是否满足过滤器。
2、满足过滤器,按照设置的Formatter
生成字符串。
3、将内容写入到具体的文件或者输出流
不同的Handler
可能有不同的处理,但是底层原理还是做这三件事情。
(3)logging日志级别
我们先来思考下下面的两个问题:
- 作为开发人员,在开发一个应用程序时需要什么日志信息?在应用程序正式上线后需要什么日志信息?
- 作为应用运维人员,在部署开发环境时需要什么日志信息?在部署生产环境时需要什么日志信息?
在软件开发阶段或部署开发环境时,为了尽可能详细的查看应用程序的运行状态来保证上线后的稳定性,我们可能需要把该应用程序所有的运行日志全部记录下来进行分析,这是非常耗费机器性能的。
当应用程序正式发布或在生产环境部署应用程序时,我们通常只需要记录应用程序的异常信息、错误信息等,这样既可以减小服务器的I/O压力,也可以避免我们在排查故障时被淹没在日志的海洋里。
那么怎样才能在不改动应用程序代码的情况下,根据事件的重要性或者称之为等级,实现在不同的环境中,记录不同详细程度的日志呢?
这就是日志等级的作用了,我们通过配置文件指定我们需要的日志等级就可以了。
级别 | 何时使用 |
---|---|
DEBUG |
细节信息,仅当诊断问题时适用。 |
INFO |
确认程序按预期运行。 |
WARNING |
表明发生了一些意外,或者不久的将来会发生问题(如‘磁盘满了’)。但程序还是在正常工作。 |
ERROR |
由于严重的问题,程序的某些功能已经不能正常执行。 |
CRITICAL |
严重的错误,表明程序已不能继续运行了。 |
说明:
- 上面列表中的日志等级是从上到下依次升高的,即:
DEBUG
<INFO
<WARNING
<ERROR
<CRITICAL
。而日志的信息量是依次减少的。 - 当为某个应用程序指定一个日志级别后,应用程序会记录所有日志级别大于或等于指定日志级别的日志信息,而不是仅仅记录指定级别的日志信息,小于该等级的日志记录将会被丢弃。
总结:
- 开发应用程序时或部署开发环境时,可以使用
DEBUG
或INFO
级别的日志获取尽可能详细的日志信息,可以方便进行开发或部署调试。- 应用上线或部署生产环境时,应用使用
WARNING
或ERROR
或CRITICAL
级别的日志,来降低机器的I/O压力和提高获取错误日志信息的效率。- 日志级别的指定通常都是在应用程序的配置文件中进行指定的。
- 不同的应用程序所定义的日志等级会有所差别,根据实际需求来决定。
参考:
『无为则无心』Python日志 — 64、Python日志模块logging介绍的更多相关文章
- 『无为则无心』Python日志 — 65、日志模块logging的使用
目录 1.logger类用法 2.handler类用法 3.formatter类用法 4.filter类用法 1.logger类用法 logger类:logger用于提供日志接口,常用于配置和发送日志 ...
- 『无为则无心』Python日志 — 66、将日志信息保存到文件中
目录 1.把日志信息保存到文件中 2.拓展 (1)观察代码 (2)提出问题 (3)问题说明 1.把日志信息保存到文件中 代码如下所示: """ logging模块是Pyt ...
- 『无为则无心』Python日志 — 67、logging日志模块处理流程
目录 1.概括理解 2.详细说明 3.应用示例 1.概括理解 了解了四大组件的基本定义之后,我们通过图示的方式来理解下信息的传递过程: 也就是获取的日志信息,进入到Logger日志器中,传递给处理器确 ...
- 『无为则无心』Python日志 — 69、补充:logging.basicConfig()函数说明
目录 1.basicConfig()函数说明 2.应用 1.basicConfig()函数说明 此函数,通过创建一个带有默认Formatter(格式器)的StreamHandler(处理器),并将其添 ...
- 『无为则无心』Python基础 — 12、Python运算符详细介绍
目录 1.表达式介绍 2.运算符 (1)运算符的分类 (2)算数运算符 (3)赋值运算符 (4)复合赋值运算符 (5)比较运算符 3.逻辑运算符 拓展1:数字之间的逻辑运算 拓展2:Python中逻辑 ...
- 『无为则无心』Python基础 — 4、Python代码常用调试工具
目录 1.Python的交互模式 2.IDLE工具使用说明 3.Sublime3工具的安装与配置 (1)Sublime3的安装 (2)Sublime3的配置 4.使用Sublime编写并调试Pytho ...
- 『无为则无心』Python基础 — 6、Python的注释
目录 1.注释的作用 2.注释的分类 单行注释 多行注释 3.注释的注意事项 4.什么时候需要使用注释 5.总结 提示:完成了前面的准备工作,之后的文章开始介绍Python的基本语法了. Python ...
- 『无为则无心』Python基础 — 7、Python的变量
目录 1.变量的定义 2.Python变量说明 3.Python中定义变量 (1)定义语法 (2)标识符定义规则 (3)内置关键字 (4)标识符命名习惯 4.使用变量 1.变量的定义 程序中,数据都是 ...
- 『无为则无心』Python基础 — 10、Python字符串的格式化输出
目录 1.什么是格式化输出 2.Python格式化输出的五种方式 方式一:字符串之间用+号拼接 方式二:print()函数可同时输出多个字符串 方式三:占位符方式 方式四:f格式化方式(推荐) 方式五 ...
随机推荐
- Sentry 开发者贡献指南 - 什么是 Scope, 什么是 Hub?
当一个事件被捕获并发送到 Sentry 时,SDK 会将该事件数据与来自当前 scope 的额外信息合并.SDK 通常会在框架集成中为您自动管理 scope,您无需考虑它们.但是,您应该知道 scop ...
- qt之线程
第一种创建: mythread1.h: #ifndef MYTHREAD_H #define MYTHREAD_H #include<QThread> #include<QDebug ...
- ansible roles实践——安装java
[root@master] /etc/ansible$ cat roles/java/tasks/main.yml ---- name: unzip jdk unarchive: src=jdk-8u ...
- 绑定方法和隐藏属性之property装饰器
目录 一:绑定方法 1.绑定给对象的方法 2.绑定给类的方法 3.非绑定方法之静态方法 二,隐藏属性 1.如何隐藏属性 三,property 装饰器 一:绑定方法 1.绑定给对象的方法 class P ...
- 好用的 NPL 词库分类。
## 好用的 NPL 词库分类. 专业的词库分类技术. 主要服务于金融领域的词库划分. 上图!对比一下我们的分词和jie等模型的效果.做的就是专业! .random headers={ 'User-Agent':ua } print(heade ...
- 如何在pyqt中通过调用 SetWindowCompositionAttribute 实现Win10亚克力效果
亚克力效果 在<如何在pyqt中实现窗口磨砂效果>和<如何在pyqt中实现win10亚克力效果>中,我们调用C++ dll来实现窗口效果,这种方法要求电脑上必须装有MSVC.V ...
- 【Python爬虫】爬虫利器 requests 库小结
requests库 Requests 是一个 Python 的 HTTP 客户端库. 支持许多 HTTP 特性,可以非常方便地进行网页请求.网页分析和处理网页资源,拥有许多强大的功能. 本文主要介绍 ...
- TensorFlow 深度学习中文第二版·翻译完成
原文:Deep Learning with TensorFlow Second Edition 协议:CC BY-NC-SA 4.0 不要担心自己的形象,只关心如何实现目标.--<原则>, ...
- 解决github.com无法访问
解决 绕过DNS解析,直接使用本地DNS记录进行直接跳转. DNS查询 在浏览器中打开DNS查询网站:http://tool.chinaz.com/dns?type=1&host=github ...