python logging 遇到的坑 日志重复打印问题的解决方法

python 中 logging模块 假如遇到多线程 或者多进程 或者在web框架中自定义logging的话

非常容易重复打印日志 和造成内存崩溃

所以

解决方法如下：

重写日志方法 用类：

class Log():

import logging

def __init__(self):

    self.logger = logging.getLogger(__name__)

# 以下三行为清空上次文件

    # 这为清空当前文件的logging 因为logging会包含所有的文件的logging

    logging.Logger.manager.loggerDict.pop(__name__)

    # 将当前文件的handlers 清空

    self.logger.handlers = []

    # 然后再次移除当前文件logging配置

    self.logger.removeHandler(self.logger.handlers)

    #  这里进行判断，如果logger.handlers列表为空，则添加，否则，直接去写日志

    if not self.logger.handlers:

    # loggger 文件配置路径

        self.handler = logging.FileHandler(os.getcwd() + '/logger/%s_log/%s_score.log' % (str(dt.date.today()), str(dt.date.today())))

    # logger 配置等级

        self.logger.setLevel(logging.DEBUG)

     # logger 输出格式

        formatter = logging.Formatter('%(asctime)s - %(levelname)s - %(name)s - %(message)s')

    # 添加输出格式进入handler

        self.handler.setFormatter(formatter)

    # 添加文件设置金如handler

        self.logger.addHandler(self.handler)

    # 以下皆为重写方法 并且每次记录后清除logger

def info(self,message=None):

    self.__init__()

    self.logger.info(message)

    self.logger.removeHandler(self.logger.handlers)

def debug(self,message=None):

    self.__init__()

    self.logger.debug(message)

    self.logger.removeHandler(self.logger.handlers)

def warning(self,message=None):

    self.__init__()

    self.logger.warning(message)

    self.logger.removeHandler(self.logger.handlers)

def error(self,message=None):

    self.__init__()

    self.logger.error(message)

    self.logger.removeHandler(self.logger.handlers)

def critical(self, message=None):

    self.__init__()

    self.logger.critical(message)

    self.logger.removeHandler(self.logger.handlers)

亲测有效

另外 模块尤其注意 例如web请求的时候 在接口处调用 然后引导传参 千万别做全局变量