前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >Python - 日志处理(logging模块)

Python - 日志处理(logging模块)

原创
作者头像
ruochen
修改2021-05-12 09:59:01
8740
修改2021-05-12 09:59:01
举报

LOG

1. 日志相关概念

  • 日志
  • 日志的级别(level)
    • 不同的用户关注不同的程序信息
    • DEBUG
    • INFO
    • NOTICE
    • WARNING
    • ERROR
    • CRITICAL
    • ALERT
    • EMERGENCY
  • IO 操作=>不要太频繁
  • LOG的作用
    • 调试
    • 了解软件的运行情况
    • 分析定位问题
  • 日志信息
    • time
    • 地点
    • level
    • 内容
  • 成熟的第三方 - log4j - log4php - logging2. logging 模块
  • 日志级别
    • 级别可自定义
    • DEBUG
    • INFO
    • WARNING
    • ERROR
    • CRITICAL
  • 初始化/写日志实例需要指定级别,只有当级别等于或高于指定级别才被记录
  • 使用方式
    • 直接使用logging(封装了其他组件)
    • logging四大组件直接定制

2.1 logging 模块级别的日志

  • 使用以下几个函数
    • logging.debug(msg, *args, **kwargs) 创建一条严重级别为DEBUG的日志记录
    • logging.info(msg, *args, **kwargs) 创建一条严重级别为INFO的日志记录
    • logging.warning(msg, *args, **kwargs) 创建一条严重级别为WARNING的日志记录
    • logging.error(msg, *args, **kwargs) 创建一条严重级别为ERROR的日志记录
    • logging.critical(msg, *args, **kwargs) 创建一条严重级别为CRITICAL的日志记录
    • logging.log(level, *args, **kwargs) 创建一条严重级别为level的日志记录
    • logging.basicConfig(**kwargs) 对root logger进行一次性配置
  • logging.basicConfig(**kwargs) 对root logger进行一次性配置
    • 只在第一次调用的时候起作用
    • 不配置logger则使用默认值
      • 输出:sys.stderr
      • 级别:WARNING
      • 格式:level:log_name:content
    • 案例: 01.py import logging
代码语言:txt
复制
LOG_FORMAT = "%(asctime)s=====%(levelname)s+++++%(message)s"
代码语言:txt
复制
logging.basicConfig(filename="ruochen.log", level=logging.DEBUG, format=LOG_FORMAT)
代码语言:txt
复制
logging.debug("This is a debug log.")
代码语言:txt
复制
logging.info("This is a info log.")
代码语言:txt
复制
logging.warning("This is a warning log.")
代码语言:txt
复制
logging.error("This is a error log.")
代码语言:txt
复制
logging.critical("This is a critical log.")
代码语言:txt
复制
# 另外一种写法
代码语言:txt
复制
logging.log(logging.DEBUG, "This is a debug log.")
代码语言:txt
复制
logging.log(logging.INFO, "This is a info log.")
代码语言:txt
复制
logging.log(logging.WARNING, "This is a warning log.")
代码语言:txt
复制
logging.log(logging.ERROR, "This is a error log.")
代码语言:txt
复制
logging.log(logging.CRITICAL, "This is a critical log.")
代码语言:txt
复制
```
代码语言:txt
复制
```
代码语言:txt
复制
# ruochen.log
代码语言:txt
复制
DEBUG:root:This is a debug log.
代码语言:txt
复制
INFO:root:This is a info log.
代码语言:txt
复制
WARNING:root:This is a warning log.
代码语言:txt
复制
ERROR:root:This is a error log.
代码语言:txt
复制
CRITICAL:root:This is a critical log.
代码语言:txt
复制
DEBUG:root:This is a debug log.
代码语言:txt
复制
INFO:root:This is a info log.
代码语言:txt
复制
WARNING:root:This is a warning log.
代码语言:txt
复制
ERROR:root:This is a error log.
代码语言:txt
复制
CRITICAL:root:This is a critical log.
代码语言:txt
复制
2019-07-01 09:51:01,181=====DEBUG+++++(message)s
代码语言:txt
复制
2019-07-01 09:51:01,181=====INFO+++++(message)s
代码语言:txt
复制
2019-07-01 09:51:01,181=====WARNING+++++(message)s
代码语言:txt
复制
2019-07-01 09:51:01,181=====ERROR+++++(message)s
代码语言:txt
复制
2019-07-01 09:51:01,181=====CRITICAL+++++(message)s
代码语言:txt
复制
2019-07-01 09:51:01,181=====DEBUG+++++(message)s
代码语言:txt
复制
2019-07-01 09:51:01,181=====INFO+++++(message)s
代码语言:txt
复制
2019-07-01 09:51:01,181=====WARNING+++++(message)s
代码语言:txt
复制
2019-07-01 09:51:01,182=====ERROR+++++(message)s
代码语言:txt
复制
2019-07-01 09:51:01,182=====CRITICAL+++++(message)s
代码语言:txt
复制
2019-07-01 09:52:24,155=====DEBUG+++++This is a debug log.
代码语言:txt
复制
2019-07-01 09:52:24,155=====INFO+++++This is a info log.
代码语言:txt
复制
2019-07-01 09:52:24,155=====WARNING+++++This is a warning log.
代码语言:txt
复制
2019-07-01 09:52:24,155=====ERROR+++++This is a error log.
代码语言:txt
复制
2019-07-01 09:52:24,155=====CRITICAL+++++This is a critical log.
代码语言:txt
复制
2019-07-01 09:52:24,155=====DEBUG+++++This is a debug log.
代码语言:txt
复制
2019-07-01 09:52:24,156=====INFO+++++This is a info log.
代码语言:txt
复制
2019-07-01 09:52:24,156=====WARNING+++++This is a warning log.
代码语言:txt
复制
2019-07-01 09:52:24,156=====ERROR+++++This is a error log.
代码语言:txt
复制
2019-07-01 09:52:24,156=====CRITICAL+++++This is a critical log.
代码语言:txt
复制
```
代码语言:txt
复制
- format 参数
代码语言:txt
复制
    asctime 	%(asctime)s 	日志事件发生的时间--人类可读时间,如:2003-07-08 16:49:45,896
代码语言:txt
复制
    created 	%(created)f 	日志事件发生的时间--时间戳,就是当时调用time.time()函数返回的值
代码语言:txt
复制
    relativeCreated 	%(relativeCreated)d 	日志事件发生的时间相对于logging模块加载时间的相对毫秒数(目前还不知道干嘛用的)
代码语言:txt
复制
    msecs 	%(msecs)d 	日志事件发生事件的毫秒部分
代码语言:txt
复制
    levelname 	%(levelname)s 	该日志记录的文字形式的日志级别('DEBUG', 'INFO', 'WARNING', 'ERROR', 'CRITICAL')
代码语言:txt
复制
    levelno 	%(levelno)s 	该日志记录的数字形式的日志级别(10, 20, 30, 40, 50)
代码语言:txt
复制
    name 	%(name)s 	所使用的日志器名称,默认是'root',因为默认使用的是 rootLogger
代码语言:txt
复制
    message 	%(message)s 	日志记录的文本内容,通过 msg % args计算得到的
代码语言:txt
复制
    pathname 	%(pathname)s 	调用日志记录函数的源码文件的全路径
代码语言:txt
复制
    filename 	%(filename)s 	pathname的文件名部分,包含文件后缀
代码语言:txt
复制
    module 	%(module)s 	filename的名称部分,不包含后缀
代码语言:txt
复制
    lineno 	%(lineno)d 	调用日志记录函数的源代码所在的行号
代码语言:txt
复制
    funcName 	%(funcName)s 	调用日志记录函数的函数名
代码语言:txt
复制
    process 	%(process)d 	进程ID
代码语言:txt
复制
    processName 	%(processName)s 	进程名称,Python 3.1新增
代码语言:txt
复制
    thread 	%(thread)d 	线程ID
代码语言:txt
复制
    threadName 	%(thread)s 	线程名称 

2.2 logging 模块的处理流程

  • 四大组件
    • 日志器(Logger):产生日志的一个接口
    • 处理器(Handler):把产生的日志发送到相应的目的地
    • 过滤器(Filter):更精细的控制哪些日志输出
    • 格式器(Formatter):对输出信息进行格式化
  • logger
    • 产生一个日志
    • 操作 Logger.setLevel() 设置日志器将会处理的日志消息的最低严重级别 Logger.addHandler() 和 Logger.removeHandler() 为该logger对象添加 和 移除一个handler对象 Logger.addFilter() 和 Logger.removeFilter() 为该logger对象添加 和 移除一个filter对象 Logger.debug: 产生一条debug级别的日志,同理,info,error,等 Logger.exception(): 创建类似于Logger.error的日志消息 Logger.log():获取一个明确的日志level参数类创建一个日志记录
    • 如何得到一个logger对象
      • 实例化
      • logging.getLogger()
  • Handler
    • 吧log发送到指定位置
    • 方法
      • setLevel
      • setFormat
      • addFilter,removeFilter
    • 不需要直接使用,Handler是基类
代码语言:txt
复制
        logging.StreamHandler 	将日志消息发送到输出到Stream,如std.out, std.err或任何file-like对象。
代码语言:txt
复制
        logging.FileHandler 	将日志消息发送到磁盘文件,默认情况下文件大小会无限增长
代码语言:txt
复制
        logging.handlers.RotatingFileHandler 	将日志消息发送到磁盘文件,并支持日志文件按大小切割
代码语言:txt
复制
        logging.hanlders.TimedRotatingFileHandler 	将日志消息发送到磁盘文件,并支持日志文件按时间切割
代码语言:txt
复制
        logging.handlers.HTTPHandler 	将日志消息以GET或POST的方式发送给一个HTTP服务器
代码语言:txt
复制
        logging.handlers.SMTPHandler 	将日志消息发送给一个指定的email地址
代码语言:txt
复制
        logging.NullHandler 	该Handler实例会忽略error messages,通常被想使用logging的library开发者使用来避免'No handlers could be found for logger XXX'信息的出现。
  • Format类
    • 直接实例化
    • 可以继承Format添加特殊内容
    • 三个参数
    • 直接实例化
    • 可以继承Format添加特殊内容
    • 三个参数
      • fmt:指定消息格式化字符串,如果不指定该参数则默认使用message的原始值
      • datefmt:指定日期格式字符串,如果不指定该参数则默认使用"%Y-%m-%d %H:%M:%S"
      • style:Python 3.2新增的参数,可取值为 '%', '{'和 '$',如果不指定该参数则默认使用'%'
  • Filter类
    • 可以按Handler和Logger使用
    • 控制传递过来的信息的具体内容
    • 案例02.py # 02.py '''
代码语言:txt
复制
1. 需求
代码语言:txt
复制
现在有以下几个日志记录的需求
代码语言:txt
复制
    1) 要求将所有级别的所有日志都写入磁盘文件
代码语言:txt
复制
    2) all.log 文件中记录所有的日志信息,日志格式为:日期和时间 - 日志级别 - 日志信息
代码语言:txt
复制
    3) error.log文件中单独记录error及以上级别的日志信息,日志格式为:日期和时间 - 日志级别 - 文件名[:行号] - 日志信息
代码语言:txt
复制
    4) 要求all.log在每天凌晨进行日志切割
代码语言:txt
复制
'''
代码语言:txt
复制
import logging
代码语言:txt
复制
import logging.handlers
代码语言:txt
复制
import datetime
代码语言:txt
复制
# 定义logger
代码语言:txt
复制
logger = logging.getLogger("mylogger")
代码语言:txt
复制
logger.setLevel(logging.DEBUG)
代码语言:txt
复制
# 为两个不同的文件设置不同的Handler
代码语言:txt
复制
rf_handler = logging.handlers.TimedRotatingFileHandler("all.log", when='midnight', interval=1, backupCount=7, atTime=datetime.time(0, 0, 0, 0))
代码语言:txt
复制
rf_handler.setFormatter(logging.Formatter("%(asctime)s - &(levelname)s - %(message)s"))
代码语言:txt
复制
f_handler = logging.FileHandler("error.log")
代码语言:txt
复制
f_handler.setLevel(logging.ERROR)
代码语言:txt
复制
f_handler.setFormatter(logging.Formatter("%(asctime)s - %(levelname)s - %(filename)s[:%(lineno)d] - %(message)s"))
代码语言:txt
复制
# 把相应的处理器组装到logger上
代码语言:txt
复制
logger.addHandler(rf_handler)
代码语言:txt
复制
logger.addHandler(f_handler)
代码语言:txt
复制
logger.debug('debug message')
代码语言:txt
复制
logger.info('info message')
代码语言:txt
复制
logger.warning('warning message')
代码语言:txt
复制
logger.error('error message')
代码语言:txt
复制
logger.critical('critical message')
代码语言:txt
复制
```
代码语言:txt
复制
```
代码语言:txt
复制
# all.log
代码语言:txt
复制
2019-07-01 10:48:06,878 - &(levelname)s - debug message
代码语言:txt
复制
2019-07-01 10:48:06,878 - &(levelname)s - info message
代码语言:txt
复制
2019-07-01 10:48:06,878 - &(levelname)s - warning message
代码语言:txt
复制
2019-07-01 10:48:06,879 - &(levelname)s - error message
代码语言:txt
复制
2019-07-01 10:48:06,879 - &(levelname)s - critical message
代码语言:txt
复制
```
代码语言:txt
复制
```
代码语言:txt
复制
# error.log
代码语言:txt
复制
2019-07-01 10:48:06,879 - ERROR - 02.py[:36] - error message
代码语言:txt
复制
2019-07-01 10:48:06,879 - CRITICAL - 02.py[:37] - critical message
代码语言:txt
复制
```

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • LOG
    • 1. 日志相关概念
      • 2.1 logging 模块级别的日志
      • 2.2 logging 模块的处理流程
相关产品与服务
日志服务
日志服务(Cloud Log Service,CLS)是腾讯云提供的一站式日志服务平台,提供了从日志采集、日志存储到日志检索,图表分析、监控告警、日志投递等多项服务,协助用户通过日志来解决业务运维、服务监控、日志审计等场景问题。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档