热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

开发笔记:python日志之logging模块理解

篇首语:本文由编程笔记#小编为大家整理,主要介绍了python日志之logging模块--理解相关的知识,希望对你有一定的参考价值。

篇首语:本文由编程笔记#小编为大家整理,主要介绍了python日志之logging模块--理解相关的知识,希望对你有一定的参考价值。



一、简介
logging模块是python内置的标准模块,主要用于输出运行日志,可以设置输出日志的等级、日志保存路径、日志文件和回滚等;
可以说,logging模块主要由4部分组成:
    *Logger 记录器,提供了应用程序代码能直接使用的接口
    *Handler 处理器,将记录器产生的日志记录发送至合适的目的地,或者说将Logger产生的日志传到指定位置
    *Filters 过滤器,对输出的日志进行过滤,它可以决定输出哪些日志记录
    *Formatter 格式化器,控制日志输出的格式,指明了最终输出中日志记录的布局

    1.1 Logger 记录器
        在记录日志之前,必须要先创建一个记录器,即创建Logger实例。如果没有显式的进行创建,则默认创建一个root logger,并应用默认的日志级别、处理器和格式化器;
        (默认的日志级别为:WARN; 默认的处理器Handler[StreamHandler,即将日志信息打印输出在标准输出上]; 默认的格式化器Formatter[默认的格式即为第一个简单使用程序中输出的格式])
        记录器创建方法:


1 logger = logging.getLogger(logger_name)

        【注意】loggers对象是有父子关系的,当没有父logger对象时它的父对象是root,当拥有父对象时父子关系会被修正。举个例子logging.getLogger("abc.xyz")会创建两个logger对象,一个是abc父对象,一个是xyz子对象,同时abc没有父对象所以它的父对象是root。但是实际上abc是一个占位对象(虚的日志对象),可以没有handler来处理日志。但是root不是占位对象,如果某一个日志对象打日志时,它的父对象会同时收到日志,所以有些使用者发现创建了一个logger对象时会打两遍日志,就是因为他创建的logger打了一遍日志,同时root对象也打了一遍日志

    1.2 Handler 处理器
        创建Logger实例后,可以使用以下方法进行日志级别设置,增加处理器Handler       


logger.setLevel(logging.ERROR) # 设置日志的级别为ERROR, 即只有日志大于等于ERROR的日志才会输出

              日志级别:
                            NOTSET—— 0
                            DEBUG——10
                            INFO—— 20
                            WARNING——30
                            ERROR ——40
                            CRITICAL —— 50
              当一个logger收到日志信息后先判断是否符合level,如果决定要处理就将信息传递给Handler进行处理


logger.addHandler(handler_name) # 为Logger实例增加一个处理器
logger.removeHandler(handler_name) # 为Logger实例删除一个处理器

            一个logger可以拥有多个handler,每个handler同样有一个日志级别,就是说logger可以根据不同的日志级别将日志传递给不同的handler。当然也可以相同的级别传递给多个handlers这就根据需求来灵活的设置了。
        Handler处理器类型有很多种,比较常用的有三个,StreamHandler,FileHandler,NullHandler
        StreamHandler:
            创建方法:


sh = logging.StreamHandler(stream=None)

            当创建StreamHandler之后,可以通过使用以下方法设置日志级别,设置格式化器Formatter,增加或删除过滤器Filter。


sh.setLevel(logging.WARN) # 指定日志级别,低于WARN级别的日志将会被忽略
sh.setFormatter(formatter_name) # 设置一个格式化器formatter
sh.addFilter(filter_name) # 增加一个过滤器,可以增加多个
sh.removeFilter(filter_name) # 删除一个过滤器

        FileHandler:
            创建方法


fh = logging.fileHandler(filename, mode=a,encoding=None,delay=False)

        NullHandler:
            NullHandler类位于核心logging包,不做任何的格式化或者输出。本质上它是个“什么都不做”的handler,由库开发者使用 

   1.3 Filter 过滤器
        Filters 提供了更细粒度的判断,来决定日志是否需要打印。原则上handler获得一个日志就必定会根据级别被统一处理,但是如果handler拥有一个Filter可以对日志进行额外的处理和判断。例如Filter能够对来自特定源的日志进行拦截or修改甚至修改其日志级别(修改后再进行级别判断)。
        logger和handler都可以安装filter甚至可以安装多个filter串联起来。
        创建方法:


filter = logging.Filter(name=‘‘)

    1.4 Formatter 格式化器
        Formatter 指定了最终某条记录打印的格式布局。Formatter会将传递来的信息拼接成一条具体的字符串。使用Formatter对象设置日志信息最后的规则、结构和内容,默认的时间格式为%Y-%m-%d %H:%M:%S。
        创建方法:


formatter = logging.Formatter(fmt=None, datefmt=None)

        其中,fmt是消息的格式化字符串,datefmt是日期字符串。如果不指明fmt,将使用‘%(message)s‘。如果不指明datefmt,将使用ISO8601日期格式。
另外,Logger是一个树形层级结构,一个Logger可以包含一个或者多个Handler和Filter,一个Logger实例可以新增多个Handler,一个Handler可以新增多个格式化器或者多个过滤器,而且日志级别将会继承。
二、Logging工作流程
    2.1 logging模块使用过程
        *导入logging模块,logging模块中的代码将会被执行,这个过程中将产生logging日志系统的默认配置
        *自定义配置,logging标准模块支持三种配置方式:dictConfig, fileConfig, listen。其中,dictConfig是通过一个字典进行配置Logger,Handler,FilterFormatter; fileConfig则是通过一个字典进行配置;而listen则是监听一个网络端口,通过接收网络数据来进行配置。当然除了以上的集团化配置外,也可以直接调用Logger,Handler等对象中的方法在代码中显式配置。
        *使用logging模块的全局作用域中的getLogger函数来得到一个Logger对象实例
        *使用Logger对象中的debug,info,error,warn,critical等方法记录日志信息。
    2.2 logging模块处理流程
        *判断日志的级别是否大于Logger对象的等级,如果大于,则往下执行,否则,流程结束
        *产生日志。第一步,判断是否有异常,如果有,则添加异常信息。第二步,处理日志记录方法中的占位符,即一般的字符串格式化处理
        *使用注册到Logger对象中的Filters进行过滤。如果有多个过滤器,则依次过滤。只要有一个过滤器返回假,则结束过滤,且该日志信息将丢弃,不再处理
         ,而处理流程也至此结束,否则,处理流程往下执行。
        *在当前Logger对象中查找Handler,如果查找不到任何Handler,则往上到该Logger对象的父Logger中查找,如果找到一个或多个Handler,则依次用Handler来处理日志信息。但在每个Handler处理日志信息过程中,会首先判断日志信息的等级是否大于该Handler的等级,如果大于,则往下执行(由Logger对象进入Handler对象中),否则,处理流程结束。
        *执行Handler对象中的filter方法,该方法会依次执行注册到该Handler对象中的Filter。如果有一个Filter判断该日志信息为假,则此后的所有Filter都不再执行,而直接将该日志信息丢弃,处理流程结束
        *使用Formatter类格式化最终的输出结果。 注:Formatter同上述第2步的字符串格式化不同,它会添加额外的信息,比如日志产生的时间,产生日志的源代码所在的源文件的路径等等。
        *真正地输出日志信息(到网络,文件,终端,邮件等)。至于输出到哪个目的地,由Handler的种类来决定
三、日志配置
    3.1 配置方式
        *显式创建记录器Logger、处理器Handler和格式化器Formatter,并进行相关设置
        *通过简单方式进行配置,使用basicConfig()函数直接进行配置
        *通过配置文件进行配置,使用fileConfig()函数读取配置文件
        *通过配置字典进行配置,使用dictConfig()函数读取配置信息
        *通过网络进行配置,使用listen()函数进行网络配置
        ——basicConfig关键字参数
            filename:创建一个FileHandle,使用指定的文件名,而不是使用StreamHandle
            filemode:如果指明了文件名,指明打开文件的模式,默认为‘a’
            format:handler使用指明的格式化字符串
            detefmt:使用指明的时间日期格式
            level:指明根logger的级别
            stream:使用指明的流来初始化StreamHandler。该参数与‘filename‘不兼容,如果两个都有,‘stream‘被忽略
        ——format格式
            %(levelno)s -- 打印日志级别的数值
            %(levelname)s -- 打印日志级别名称
            %(pathname)s -- 打印当前执行程序的路径
            %(filename)s -- 打印当前执行程序的名称
            %(funcName)s -- 打印日志的当前函数
            %(lineno)d -- 打印日志的当前行号
            %(asctime)s -- 打印日志的时间
            %(thread)d -- 打印线程id
            %(threadName)s -- 打印线程名称
            %(process)d -- 打印进程id
            %(message)s -- 打印进程信息

内容来源:https://www.jianshu.com/p/feb86c06c4f4            http://python.jobbole.com/87300/








































































推荐阅读
  • Nginx 反向代理与负载均衡实验
    本实验旨在通过配置 Nginx 实现反向代理和负载均衡,确保从北京本地代理服务器访问上海的 Web 服务器时,能够依次显示红、黄、绿三种颜色页面以验证负载均衡效果。 ... [详细]
  • Python + Pytest 接口自动化测试中 Token 关联登录的实现方法
    本文将深入探讨 Python 和 Pytest 在接口自动化测试中如何实现 Token 关联登录,内容详尽、逻辑清晰,旨在帮助读者掌握这一关键技能。 ... [详细]
  • 并发编程 12—— 任务取消与关闭 之 shutdownNow 的局限性
    Java并发编程实践目录并发编程01——ThreadLocal并发编程02——ConcurrentHashMap并发编程03——阻塞队列和生产者-消费者模式并发编程04——闭锁Co ... [详细]
  • 在编译BSP包过程中,遇到了一个与 'gets' 函数相关的编译错误。该问题通常发生在较新的编译环境中,由于 'gets' 函数已被弃用并视为安全漏洞。本文将详细介绍如何通过修改源代码和配置文件来解决这一问题。 ... [详细]
  • 2017-2018年度《网络编程与安全》第五次实验报告
    本报告详细记录了2017-2018学年《网络编程与安全》课程第五次实验的具体内容、实验过程、遇到的问题及解决方案。 ... [详细]
  • Google排名优化-面向Google(Search Engine Friendly)的URL设计 ... [详细]
  • JavaScript 中创建对象的多种方法
    本文详细介绍了 JavaScript 中创建对象的几种常见方式,包括对象字面量、构造函数和 Object.create 方法,并提供了示例代码和属性描述符的解释。 ... [详细]
  • 本文详细介绍了优化DB2数据库性能的多种方法,涵盖统计信息更新、缓冲池调整、日志缓冲区配置、应用程序堆大小设置、排序堆参数调整、代理程序管理、锁机制优化、活动应用程序限制、页清除程序配置、I/O服务器数量设定以及编入组提交数调整等方面。通过这些技术手段,可以显著提升数据库的运行效率和响应速度。 ... [详细]
  • 使用Nginx反向代理实现多域名端口映射
    本文介绍如何通过配置本地hosts文件和Nginx反向代理,实现多个虚拟域名的端口映射,使用户可以通过标准HTTP端口80访问不同后端服务。 ... [详细]
  • 在尝试使用C# Windows Forms客户端通过SignalR连接到ASP.NET服务器时,遇到了内部服务器错误(500)。本文将详细探讨问题的原因及解决方案。 ... [详细]
  • 优化Flask应用的并发处理:解决Mysql连接过多问题
    本文探讨了在Flask应用中通过优化后端架构来应对高并发请求,特别是针对Mysql 'too many connections' 错误的解决方案。我们将介绍如何利用Redis缓存、Gunicorn多进程和Celery异步任务队列来提升系统的性能和稳定性。 ... [详细]
  • 本文将详细探讨 Java 中提供的不可变集合(如 `Collections.unmodifiableXXX`)和同步集合(如 `Collections.synchronizedXXX`)的实现原理及使用方法,帮助开发者更好地理解和应用这些工具。 ... [详细]
  • 本文探讨了如何在Java中使用JAXB解组两个具有相同名称但不同结构的对象。我们将介绍一个抽象类Bar及其具体实现,并展示如何正确地解析XML文档以获取正确的对象实例。 ... [详细]
  • 本文介绍百度AI Studio这一集成开发平台,涵盖丰富的AI教程、经典数据集及云端计算资源。通过具体示例——在AI Studio上构建线性回归项目,帮助初学者快速掌握其核心功能与操作方法。 ... [详细]
  • 本文深入探讨了 PHP 实现计划任务的方法,包括其原理、具体实现方式以及在不同操作系统中的应用。通过详细示例和代码片段,帮助开发者理解和掌握如何高效地设置和管理定时任务。 ... [详细]
author-avatar
mobiledu2502940393
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有