热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

开发笔记:python日志之logging模块理解

篇首语:本文由编程笔记#小编为大家整理,主要介绍了python日志之logging模块--理解相关的知识,希望对你有一定的参考价值。

篇首语:本文由编程笔记#小编为大家整理,主要介绍了python日志之logging模块--理解相关的知识,希望对你有一定的参考价值。



一、简介
logging模块是python内置的标准模块,主要用于输出运行日志,可以设置输出日志的等级、日志保存路径、日志文件和回滚等;
可以说,logging模块主要由4部分组成:
    *Logger 记录器,提供了应用程序代码能直接使用的接口
    *Handler 处理器,将记录器产生的日志记录发送至合适的目的地,或者说将Logger产生的日志传到指定位置
    *Filters 过滤器,对输出的日志进行过滤,它可以决定输出哪些日志记录
    *Formatter 格式化器,控制日志输出的格式,指明了最终输出中日志记录的布局

    1.1 Logger 记录器
        在记录日志之前,必须要先创建一个记录器,即创建Logger实例。如果没有显式的进行创建,则默认创建一个root logger,并应用默认的日志级别、处理器和格式化器;
        (默认的日志级别为:WARN; 默认的处理器Handler[StreamHandler,即将日志信息打印输出在标准输出上]; 默认的格式化器Formatter[默认的格式即为第一个简单使用程序中输出的格式])
        记录器创建方法:


1 logger = logging.getLogger(logger_name)

        【注意】loggers对象是有父子关系的,当没有父logger对象时它的父对象是root,当拥有父对象时父子关系会被修正。举个例子logging.getLogger("abc.xyz")会创建两个logger对象,一个是abc父对象,一个是xyz子对象,同时abc没有父对象所以它的父对象是root。但是实际上abc是一个占位对象(虚的日志对象),可以没有handler来处理日志。但是root不是占位对象,如果某一个日志对象打日志时,它的父对象会同时收到日志,所以有些使用者发现创建了一个logger对象时会打两遍日志,就是因为他创建的logger打了一遍日志,同时root对象也打了一遍日志

    1.2 Handler 处理器
        创建Logger实例后,可以使用以下方法进行日志级别设置,增加处理器Handler       


logger.setLevel(logging.ERROR) # 设置日志的级别为ERROR, 即只有日志大于等于ERROR的日志才会输出

              日志级别:
                            NOTSET—— 0
                            DEBUG——10
                            INFO—— 20
                            WARNING——30
                            ERROR ——40
                            CRITICAL —— 50
              当一个logger收到日志信息后先判断是否符合level,如果决定要处理就将信息传递给Handler进行处理


logger.addHandler(handler_name) # 为Logger实例增加一个处理器
logger.removeHandler(handler_name) # 为Logger实例删除一个处理器

            一个logger可以拥有多个handler,每个handler同样有一个日志级别,就是说logger可以根据不同的日志级别将日志传递给不同的handler。当然也可以相同的级别传递给多个handlers这就根据需求来灵活的设置了。
        Handler处理器类型有很多种,比较常用的有三个,StreamHandler,FileHandler,NullHandler
        StreamHandler:
            创建方法:


sh = logging.StreamHandler(stream=None)

            当创建StreamHandler之后,可以通过使用以下方法设置日志级别,设置格式化器Formatter,增加或删除过滤器Filter。


sh.setLevel(logging.WARN) # 指定日志级别,低于WARN级别的日志将会被忽略
sh.setFormatter(formatter_name) # 设置一个格式化器formatter
sh.addFilter(filter_name) # 增加一个过滤器,可以增加多个
sh.removeFilter(filter_name) # 删除一个过滤器

        FileHandler:
            创建方法


fh = logging.fileHandler(filename, mode=a,encoding=None,delay=False)

        NullHandler:
            NullHandler类位于核心logging包,不做任何的格式化或者输出。本质上它是个“什么都不做”的handler,由库开发者使用 

   1.3 Filter 过滤器
        Filters 提供了更细粒度的判断,来决定日志是否需要打印。原则上handler获得一个日志就必定会根据级别被统一处理,但是如果handler拥有一个Filter可以对日志进行额外的处理和判断。例如Filter能够对来自特定源的日志进行拦截or修改甚至修改其日志级别(修改后再进行级别判断)。
        logger和handler都可以安装filter甚至可以安装多个filter串联起来。
        创建方法:


filter = logging.Filter(name=‘‘)

    1.4 Formatter 格式化器
        Formatter 指定了最终某条记录打印的格式布局。Formatter会将传递来的信息拼接成一条具体的字符串。使用Formatter对象设置日志信息最后的规则、结构和内容,默认的时间格式为%Y-%m-%d %H:%M:%S。
        创建方法:


formatter = logging.Formatter(fmt=None, datefmt=None)

        其中,fmt是消息的格式化字符串,datefmt是日期字符串。如果不指明fmt,将使用‘%(message)s‘。如果不指明datefmt,将使用ISO8601日期格式。
另外,Logger是一个树形层级结构,一个Logger可以包含一个或者多个Handler和Filter,一个Logger实例可以新增多个Handler,一个Handler可以新增多个格式化器或者多个过滤器,而且日志级别将会继承。
二、Logging工作流程
    2.1 logging模块使用过程
        *导入logging模块,logging模块中的代码将会被执行,这个过程中将产生logging日志系统的默认配置
        *自定义配置,logging标准模块支持三种配置方式:dictConfig, fileConfig, listen。其中,dictConfig是通过一个字典进行配置Logger,Handler,FilterFormatter; fileConfig则是通过一个字典进行配置;而listen则是监听一个网络端口,通过接收网络数据来进行配置。当然除了以上的集团化配置外,也可以直接调用Logger,Handler等对象中的方法在代码中显式配置。
        *使用logging模块的全局作用域中的getLogger函数来得到一个Logger对象实例
        *使用Logger对象中的debug,info,error,warn,critical等方法记录日志信息。
    2.2 logging模块处理流程
        *判断日志的级别是否大于Logger对象的等级,如果大于,则往下执行,否则,流程结束
        *产生日志。第一步,判断是否有异常,如果有,则添加异常信息。第二步,处理日志记录方法中的占位符,即一般的字符串格式化处理
        *使用注册到Logger对象中的Filters进行过滤。如果有多个过滤器,则依次过滤。只要有一个过滤器返回假,则结束过滤,且该日志信息将丢弃,不再处理
         ,而处理流程也至此结束,否则,处理流程往下执行。
        *在当前Logger对象中查找Handler,如果查找不到任何Handler,则往上到该Logger对象的父Logger中查找,如果找到一个或多个Handler,则依次用Handler来处理日志信息。但在每个Handler处理日志信息过程中,会首先判断日志信息的等级是否大于该Handler的等级,如果大于,则往下执行(由Logger对象进入Handler对象中),否则,处理流程结束。
        *执行Handler对象中的filter方法,该方法会依次执行注册到该Handler对象中的Filter。如果有一个Filter判断该日志信息为假,则此后的所有Filter都不再执行,而直接将该日志信息丢弃,处理流程结束
        *使用Formatter类格式化最终的输出结果。 注:Formatter同上述第2步的字符串格式化不同,它会添加额外的信息,比如日志产生的时间,产生日志的源代码所在的源文件的路径等等。
        *真正地输出日志信息(到网络,文件,终端,邮件等)。至于输出到哪个目的地,由Handler的种类来决定
三、日志配置
    3.1 配置方式
        *显式创建记录器Logger、处理器Handler和格式化器Formatter,并进行相关设置
        *通过简单方式进行配置,使用basicConfig()函数直接进行配置
        *通过配置文件进行配置,使用fileConfig()函数读取配置文件
        *通过配置字典进行配置,使用dictConfig()函数读取配置信息
        *通过网络进行配置,使用listen()函数进行网络配置
        ——basicConfig关键字参数
            filename:创建一个FileHandle,使用指定的文件名,而不是使用StreamHandle
            filemode:如果指明了文件名,指明打开文件的模式,默认为‘a’
            format:handler使用指明的格式化字符串
            detefmt:使用指明的时间日期格式
            level:指明根logger的级别
            stream:使用指明的流来初始化StreamHandler。该参数与‘filename‘不兼容,如果两个都有,‘stream‘被忽略
        ——format格式
            %(levelno)s -- 打印日志级别的数值
            %(levelname)s -- 打印日志级别名称
            %(pathname)s -- 打印当前执行程序的路径
            %(filename)s -- 打印当前执行程序的名称
            %(funcName)s -- 打印日志的当前函数
            %(lineno)d -- 打印日志的当前行号
            %(asctime)s -- 打印日志的时间
            %(thread)d -- 打印线程id
            %(threadName)s -- 打印线程名称
            %(process)d -- 打印进程id
            %(message)s -- 打印进程信息

内容来源:https://www.jianshu.com/p/feb86c06c4f4            http://python.jobbole.com/87300/








































































推荐阅读
  • 1.如何在运行状态查看源代码?查看函数的源代码,我们通常会使用IDE来完成。比如在PyCharm中,你可以Ctrl+鼠标点击进入函数的源代码。那如果没有IDE呢?当我们想使用一个函 ... [详细]
  • 数据库内核开发入门 | 搭建研发环境的初步指南
    本课程将带你从零开始,逐步掌握数据库内核开发的基础知识和实践技能,重点介绍如何搭建OceanBase的开发环境。 ... [详细]
  • 本文详细解析了Python中的os和sys模块,介绍了它们的功能、常用方法及其在实际编程中的应用。 ... [详细]
  • 优化ListView性能
    本文深入探讨了如何通过多种技术手段优化ListView的性能,包括视图复用、ViewHolder模式、分批加载数据、图片优化及内存管理等。这些方法能够显著提升应用的响应速度和用户体验。 ... [详细]
  • 本文将介绍如何编写一些有趣的VBScript脚本,这些脚本可以在朋友之间进行无害的恶作剧。通过简单的代码示例,帮助您了解VBScript的基本语法和功能。 ... [详细]
  • 本文详细介绍如何使用Python进行配置文件的读写操作,涵盖常见的配置文件格式(如INI、JSON、TOML和YAML),并提供具体的代码示例。 ... [详细]
  • 1:有如下一段程序:packagea.b.c;publicclassTest{privatestaticinti0;publicintgetNext(){return ... [详细]
  • 本文详细介绍了如何在Linux系统上安装和配置Smokeping,以实现对网络链路质量的实时监控。通过详细的步骤和必要的依赖包安装,确保用户能够顺利完成部署并优化其网络性能监控。 ... [详细]
  • CentOS7源码编译安装MySQL5.6
    2019独角兽企业重金招聘Python工程师标准一、先在cmake官网下个最新的cmake源码包cmake官网:https:www.cmake.org如此时最新 ... [详细]
  • 本文详细介绍了如何使用Spring Boot进行高效开发,涵盖了配置、实例化容器以及核心注解的使用方法。 ... [详细]
  • 本文详细介绍了Akka中的BackoffSupervisor机制,探讨其在处理持久化失败和Actor重启时的应用。通过具体示例,展示了如何配置和使用BackoffSupervisor以实现更细粒度的异常处理。 ... [详细]
  • Python自动化处理:从Word文档提取内容并生成带水印的PDF
    本文介绍如何利用Python实现从特定网站下载Word文档,去除水印并添加自定义水印,最终将文档转换为PDF格式。该方法适用于批量处理和自动化需求。 ... [详细]
  • 本文详细记录了在基于Debian的Deepin 20操作系统上安装MySQL 5.7的具体步骤,包括软件包的选择、依赖项的处理及远程访问权限的配置。 ... [详细]
  • 技术分享:从动态网站提取站点密钥的解决方案
    本文探讨了如何从动态网站中提取站点密钥,特别是针对验证码(reCAPTCHA)的处理方法。通过结合Selenium和requests库,提供了详细的代码示例和优化建议。 ... [详细]
  • 本文介绍了Java并发库中的阻塞队列(BlockingQueue)及其典型应用场景。通过具体实例,展示了如何利用LinkedBlockingQueue实现线程间高效、安全的数据传递,并结合线程池和原子类优化性能。 ... [详细]
author-avatar
mobiledu2502940393
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有