Python线上环境使用日志的及配置文件
目录
- 瞎比比
- 与print相比logging有什么优势？
- 基础用法
- 保存到文件
- 多模块使用logging
- 使用配置文件配置logging
瞎比比
这篇文章其实早在一个月之前就写好了。奈何，加班猛如虎，真的怕了。直至今天才幸运地有了个双休，赶紧排版一下文章发布了。以下为正文。在初学Python的时候，我们使用
print("helloworld")
输出了我们的第一行代码。在之后的日子里，便一直使用print进行调试（当然，还有IDE的debug模式）。但是，当你在线上运行Python脚本的时候，你并不可能一直守着你的运行终端。可是如果不守着的话，每当出现bug，错误又无从查起。这个时候，你需要对你的调试工具进行更新换代了，这里我推荐一个优雅的调试工具logging。
与print相比logging有什么优势？
那既然我推荐这个工具，它凭什么要被推荐呢？且来看看它有什么优势：
- 可以输出到多处，例如：在输出到控制台的同时，可以保存日志到日志文件里面，或者保存到其他远程服务器
- 可以设置日志等级，DEBUG、INFO、ERROR等，在不同的环境（调试环境、线上环境）使用不同的等级来过滤日志，使用起来很方便
- 配置灵活，可保存到配置文件，格式化输出
基础用法
下面涉及到的代码我都省略了导包部分，详见源码(后台回复logging获取源码)
base_usage.py
logging.basicConfig(level=log_level,format='%(asctime)s-%(name)s-%(levelname)s-%(message)s')
logger=logging.getLogger(__name__)
logger.info("Loglevelinfo")
logger.debug("Logleveldebug")
logger.warning("Loglevelwarning")
#捕获异常，并打印出出错行数
try:
raiseException("myexception")
except(SystemExit,KeyboardInterrupt):
raise
exceptException:
logger.error("thereisanerror=>",exc_info=True)
level为日志等级，分为：
FATAL：致命错误
CRITICAL：特别糟糕的事情，如内存耗尽、磁盘空间为空，一般很少使用
ERROR：发生错误时，如IO操作失败或者连接问题
WARNING：发生很重要的事件，但是并不是错误时，如用户登录密码错误
INFO：处理请求或者状态变化等日常事务
DEBUG：调试过程中使用DEBUG等级，如算法中每个循环的中间状态
foamat可以格式化输出，其参数有如下：
%(levelno)s：打印日志级别的数值 %(levelname)s：打印日志级别的名称 %(pathname)s：打印当前执行程序的路径，其实就是sys.argv[0] %(filename)s：打印当前执行程序名 %(funcName)s：打印日志的当前函数 %(lineno)d：打印日志的当前行号 %(asctime)s：打印日志的时间 %(thread)d：打印线程ID %(threadName)s：打印线程名称 %(process)d：打印进程ID %(message)s：打印日志信息
捕获异常,以下两行代码都具有相同的作用
logger.exception(msg,_args) logger.error(msg,exc_info=True,_args)
保存到文件，并输出到命令行
这个用法直接copy使用就行
importlogging
#写入文件
importlogging
logger=logging.getLogger(__name__)
logger.setLevel(level=logging.INFO)
handler=logging.FileHandler("info.log")
handler.setLevel(logging.INFO)
formatter=logging.Formatter('%(asctime)s-%(name)s-%(levelname)s-%(message)s')
handler.setFormatter(formatter)
logger.addHandler(handler)
logger.info("Loglevelinfo")
logger.debug("Logleveldebug")
logger.warning("Loglevelwarning")
#写入文件，同时输出到屏幕
importlogging
logger=logging.getLogger(__name__)
logger.setLevel(level=logging.INFO)
handler=logging.FileHandler("info.log")
handler.setLevel(logging.INFO)
formatter=logging.Formatter('%(asctime)s-%(name)s-%(levelname)s-%(message)s')
handler.setFormatter(formatter)
console=logging.StreamHandler()
console.setLevel(logging.INFO)
logger.addHandler(handler)
logger.addHandler(console)
logger.info("Loglevelinfo")
logger.debug("Logleveldebug")
logger.warning("Loglevelwarning")
多模块使用logging
被调用者的日志格式会与调用者的日志格式一样main.py
#-*-coding:utf-8-*-
__auth__='zone'
__date__='2019/6/17下午11:46'
'''
公众号：zone7
小程序：编程面试题库
'''
importos
importlogging
frompython.logging_model.codeimportsub_of_main
logger=logging.getLogger("zone7Model")
logger.setLevel(level=logging.INFO)
handler=logging.FileHandler("log.txt")
handler.setLevel(logging.INFO)
formatter=logging.Formatter('%(asctime)s-%(name)s-%(levelname)s-%(message)s')
handler.setFormatter(formatter)
console=logging.StreamHandler()
console.setLevel(logging.INFO)
console.setFormatter(formatter)
logger.addHandler(handler)
logger.addHandler(console)
sub=sub_of_main.SubOfMain()
logger.info("mainmodulelog")
sub.print_some_log()
sub_of_main.py
#-*-coding:utf-8-*-
__auth__='zone'
__date__='2019/6/17下午11:47'
'''
公众号：zone7
小程序：编程面试题库
'''
importlogging
module_logger=logging.getLogger("zone7Model.sub.module")
classSubOfMain(object):
def__init__(self):
self.logger=logging.getLogger("zone7Model.sub.module")
self.logger.info("initsubclass")
defprint_some_log(self):
self.logger.info("subclasslogisprinted")
defsom_function():
module_logger.info("callfunctionsome_function")
使用配置文件配置logging
这里分别给出了两种配置文件的使用案例，都分别使用了三种输出，输出到命令行、输出到文件、将错误信息独立输出到一个文件
log_cfg.json
{
"version":1,
"disable_existing_loggers":false,
"formatters":{
"simple":{
"format":"%(asctime)s-%(name)s-%(levelname)s-%(message)s"
}
},
"handlers":{
"console":{
"class":"logging.StreamHandler",
"level":"DEBUG",
"formatter":"simple",
"stream":"ext://sys.stdout"
},
"info_file_handler":{
"class":"logging.handlers.RotatingFileHandler",
"level":"INFO",
"formatter":"simple",
"filename":"info.log",
"maxBytes":10485760,
"backupCount":20,
"encoding":"utf8"
},
"error_file_handler":{
"class":"logging.handlers.RotatingFileHandler",
"level":"ERROR",
"formatter":"simple",
"filename":"errors.log",
"maxBytes":10485760,
"backupCount":20,
"encoding":"utf8"
}
},
"loggers":{
"my_module":{
"level":"ERROR",
"handlers":["info_file_handler2"],
"propagate":"no"
}
},
"root":{
"level":"INFO",
"handlers":["console","info_file_handler","error_file_handler"]
}
}
通过json文件读取配置：
importjson
importlogging.config
importos
defset_log_cfg(default_path="log_cfg.json",default_level=logging.INFO,env_key="LOG_CFG"):
path=default_path
value=os.getenv(env_key,None)
ifvalue:
path=value
ifos.path.exists(path):
withopen(path,"r")asf:
config=json.load(f)
logging.config.dictConfig(config)
else:
logging.basicConfig(level=default_level)
defrecord_some_thing():
logging.info("Loglevelinfo")
logging.debug("Logleveldebug")
logging.warning("Loglevelwarning")
if__name__=="__main__":
set_log_cfg(default_path="log_cfg.json")
record_some_thing()
log_cfg.yaml
version:1
disable_existing_loggers:False
formatters:
simple:
format:"%(asctime)s-%(name)s-%(levelname)s-%(message)s"
handlers:
console:
class:logging.StreamHandler
level:DEBUG
formatter:simple
stream:ext://sys.stdout
info_file_handler:
class:logging.handlers.RotatingFileHandler
level:INFO
formatter:simple
filename:info.log
maxBytes:10485760
backupCount:20
encoding:utf8
error_file_handler:
class:logging.handlers.RotatingFileHandler
level:ERROR
formatter:simple
filename:errors.log
maxBytes:10485760
backupCount:20
encoding:utf8
loggers:
my_module:
level:ERROR
handlers:[info_file_handler]
propagate:no
root:
level:INFO
handlers:[console,info_file_handler,error_file_handler]
通过yaml文件读取配置：
importyaml
importlogging.config
importos
defset_log_cfg(default_path="log_cfg.yaml",default_level=logging.INFO,env_key="LOG_CFG"):
path=default_path
value=os.getenv(env_key,None)
ifvalue:
path=value
ifos.path.exists(path):
withopen(path,"r")asf:
config=yaml.load(f)
logging.config.dictConfig(config)
else:
logging.basicConfig(level=default_level)
defrecord_some_thing():
logging.info("Loglevelinfo")
logging.debug("Logleveldebug")
logging.warning("Loglevelwarning")
if__name__=="__main__":
set_log_cfg(default_path="log_cfg.yaml")
record_some_thing()
总结
以上所述是小编给大家介绍的Python线上环境使用日志的及配置文件,希望对大家有所帮助，如果大家有任何疑问请给我留言，小编会及时回复大家的。在此也非常感谢大家对毛票票网站的支持！
如果你觉得本文对你有帮助，欢迎转载，烦请注明出处，谢谢！