使用Filter过滤python中的日志输出的实现方法


Posted in Python onJuly 17, 2019

事情是这样的,我写了一个tornado的服务,过程当中我用logging记录一些内容,由于一开始并没有仔细观察tornado自已的日志管理,所以我就一般用debug来记录普通日志,error记录有问题的日志,但是当服务跑起来以后才发现,tornado的访问日志的级别是info,也就是20,debug是10的,所以如果我定义了日志的级别是debug,那么默认情况下肯定也会输出到日志文件中的。

但是我现在并不关心访问日志,而且由于我这个服务可能每时每刻都会有访问,这样在我对日志信息进行搜索的时候就会有很大的影响。

该怎么办呢?

有以下几种办法

修改初始化日志时的级别

一种是修改我初始化时定义的日志级别,定成比info还高的,这样就不会再记录info的日志了

但是这种方法需要我将之前记录日志的 debug 方法也要修改为比info更高的级别,也就是要大于20。修改的地方有点多,且我已经习惯了用 debug 来记录,改起来成本有点大。

修改tornado 本身

可以到site-packages中修改tornado下的 web.py

def log_request(self, handler):
  """Writes a completed HTTP request to the logs.

  By default writes to the python root logger. To change
  this behavior either subclass Application and override this method,
  or pass a function in the application settings dictionary as
  ``log_function``.
  """
  if "log_function" in self.settings:
    self.settings["log_function"](handler)
    return
  if handler.get_status() < 400:
    log_method = access_log.info
  elif handler.get_status() < 500:
    log_method = access_log.warning
  else:
    log_method = access_log.error
  request_time = 1000.0 * handler.request.request_time()
  log_method("%d %s %.2fms", handler.get_status(),
        handler._request_summary(), request_time)

其中 log_method = access_log.info 可以修改它,access_log在log.py中定义,

access_log = logging.getLogger(“tornado.access”)

这里可以定义access_log的级别,然后再修改log_request的实现,想想都复杂,而且直接修改site-packes里的库文件是一个比较笨的方法,日后迁移会发生很多莫名其妙的问题。

使用logging.Filter设置过滤规则

其实logging早就有了相应的解决方法,logging库中有一个Filterer类,logging库中的Handler和Logger类都是继承自Filter类的

Filter类中有三个方法, addFilter(filter) , removeFilter(filter) 和 filter(record) 方法,这里主要使用addFilter和filter方法。

addFilter方法需要一个filter对象,这里我定义一个新的类,并且重写filter方法,

将日志名为 tornado.access 且日志级别是20的过滤掉。

class NoParsingFilter(logging.Filter):
  def filter(self, record):
    if record.name == 'tornado.access' and record.levelno == 20:
      return False
    return True

这样我在初始化 logging对象以后,将这个过滤器添加进去

logobj = logging.getLogger('server')
logobj.addFilter(NoParsingFilter())

这样添加一个过滤以后日志就会随心所欲的按照自已的方式来记录了,record也是logging的一个类 LogRecord ,常用的属性有 name, level, pathname, lineno,msg, args, exc_info

name 就是初始化logger对象时传入的名字

level 是级别

pathname 是哪个文件输出的这行日志

lineno 是行号

msg 是日志本身

ps:下面看下python中过滤器filter用法

#第一个参数是一个返回bool值的一般函数或lambda函数,第二个参数是一个可迭代对象
#最后返回一个可迭代对象,可以通过list获得
def is_positive(item):
  return item>0
values = [1,-2,3,-4]
print(filter(is_poditive,values))
a = list(filter(is_positive,values))
print(a)
print(values)
#output
<filter object at 0x000002398A1AB4A8>
[1, 3]
[1, -2, 3, -4]
b = list(filter(lambda item:item>0,values))
print(b)
 #output 
[1,3]

总结

以上所述是小编给大家介绍的使用Filter过滤python中的日志输出,希望对大家有所帮助,如果大家有任何疑问请给我留言,小编会及时回复大家的。在此也非常感谢大家对三水点靠木网站的支持!
如果你觉得本文对你有帮助,欢迎转载,烦请注明出处,谢谢!

Python 相关文章推荐
Python 的描述符 descriptor详解
Feb 27 Python
举例讲解Python设计模式编程中对抽象工厂模式的运用
Mar 02 Python
sublime text 3配置使用python操作方法
Jun 11 Python
Django数据库表反向生成实例解析
Feb 06 Python
Python使用pylab库实现绘制直方图功能示例
Jun 01 Python
不知道这5种下划线的含义,你就不算真的会Python!
Oct 09 Python
解决python3 HTMLTestRunner测试报告中文乱码的问题
Dec 17 Python
VS2019+python3.7+opencv4.1+tensorflow1.13配置详解
Apr 16 Python
python中shell执行知识点
May 06 Python
JAVA SWT事件四种写法实例解析
Jun 05 Python
python 利用zmail库发送邮件
Sep 11 Python
Pytorch实现WGAN用于动漫头像生成
Mar 04 Python
纯python进行矩阵的相乘运算的方法示例
Jul 17 #Python
python中update的基本使用方法详解
Jul 17 #Python
python利用wx实现界面按钮和按钮监听和字体改变的方法
Jul 17 #Python
使用Python和Scribus创建一个RGB立方体的方法
Jul 17 #Python
python实现点击按钮修改数据的方法
Jul 17 #Python
python 批量添加的button 使用同一点击事件的方法
Jul 17 #Python
python实时检测键盘输入函数的示例
Jul 17 #Python
You might like
php ajax 静态分页过程形式
2011/09/02 PHP
CI框架入门示例之数据库取数据完整实现方法
2014/11/05 PHP
CodeIgniter 完美解决URL含有中文字符串
2016/05/13 PHP
PHP实现关键字搜索后描红功能示例
2019/07/03 PHP
juqery 学习之三 选择器 子元素与表单
2010/11/25 Javascript
HTML5之lang属性与dir属性的详解
2013/06/19 Javascript
JS关闭窗口或JS关闭页面的几种代码分享
2013/10/25 Javascript
Javascript自定义函数判断网站访问类型是PC还是移动终端
2014/01/10 Javascript
js 绑定键盘鼠标事件示例代码
2014/02/12 Javascript
模拟一个类似百度google的模糊搜索下拉列表
2014/04/15 Javascript
jQuery异步验证用户名是否存在示例代码
2014/05/21 Javascript
谷歌地图打不开的解决办法
2014/08/07 Javascript
jquery分页插件jquery.pagination.js实现无刷新分页
2016/04/01 Javascript
JS使用cookie设置样式的方法
2016/06/30 Javascript
js改变透明度实现轮播图的算法
2020/08/24 Javascript
angularjs实现天气预报功能
2020/06/16 Javascript
Vue 权限控制的两种方法(路由验证)
2019/08/16 Javascript
微信小程序使用 vant Dialog组件的正确方式
2020/02/21 Javascript
javascript实现移动端上传图片功能
2020/08/18 Javascript
[00:03]DOTA2新版本PA至宝展示
2014/11/19 DOTA
[01:07:13]TNC vs Pain 2018国际邀请赛小组赛BO2 第一场 8.17
2018/08/20 DOTA
Python实现批量读取word中表格信息的方法
2015/07/30 Python
python 实时遍历日志文件
2016/04/12 Python
打包发布Python模块的方法详解
2016/09/18 Python
Python3实现的字典遍历操作详解
2018/04/18 Python
Python实现的网页截图功能【PyQt4与selenium组件】
2018/07/12 Python
Python自定义装饰器原理与用法实例分析
2018/07/16 Python
python中yield的用法详解——最简单,最清晰的解释
2019/04/04 Python
Python画图高斯分布的示例
2019/07/10 Python
python3实现绘制二维点图
2019/12/04 Python
基于python代码批量处理图片resize
2020/06/04 Python
移动端html5模拟长按事件的实现方法
2018/09/30 HTML / CSS
阿提哈德航空官方网站:Etihad Airways
2017/01/06 全球购物
2014年教师党员公开承诺书
2014/05/28 职场文书
客户答谢会致辞
2015/01/20 职场文书
电影雨中的树观后感
2015/06/15 职场文书