logging:
该模块用于记录日志的,
日志就是信息
为什么要记录日志?
可以查看有用的信息
如何记录日志?
logging模块专门记录日志
日志的级别:
1.debug 调试信息(用于记录程序在开发过程中的调试记录)
2.info 记录普通信息
3.warning 警告信息 某些操作可能发生错误
4.error 错误信息 程序发生错误
5.critical 严重错误 程序遇到问题无法执行时
logging可以用数字表示级别 由低到高:0 10 20 30 40 50
分级能够更有效率的寻找有效信息
logging模块四种核心角色:
1.Logger 日志生成器 负责产生一条完整的日志
2.Filter 过滤器 负责对日志进行过滤
3.Handler 处理器 负责将日志输出到指定位置
4.Formatter 格式化 负责处理日志显示的格式
一条日志的生命周期:
1.由Logger产生日志
2.交给过滤器进行过滤
3.交给handler按照formatter的格式进行输出
三步都可以对日志进行筛选
默认为warning,默认打印到终端
可在logging.basicConfig()函数中通过具体参数来更改logging模块默认行为可有参数有:
filename:用指定的文件名创建FileHandler,这样日志会被存储到指定的文件中
filemode文件打开方式,在指定了filename时使用这个参数,默认值为'a',还可指定为'w'
format:指定handler使用的日志显示格式
datefmt:指定日期时间格式
level:设置rootlogger的日志级别
stream:用指定的stream创建StreamHandler.可以指定输出到sys.stderr,sys.stdout或者文件默认为sys.
stderr.若同时列出了filename,和stream两个参数,则stream参数会被忽略
%(name)s:Logger的名字,并非用户名,
%(levelno)s:数字形式的日志级别
%(pathname)s:调用日志输出函数的模块的完整路径名,可能没有
%(filename)s:调用日志输出函数的模块的文件名
%(module)s:调用日志输出函数的模块名
%(funcName)s:调用日志输出函数的函数名
%(lineno)d:调用日志输出函数的语句所在的代码行
%(created)f:当前时间,用UNIX标准的表示时间的浮点数表示
%(relativeCreated)d:输出日志信息时的,自logger创建以来的毫秒数
%(asctime)s:字符串形式的当前时间,默认格式为:2017-07-08 16:48:45,896,逗号后面的是毫秒数
%(thread)d:线程ID:可能没有
%(threadName)s:线程名,可能没有
%(process)d:进程ID,可能没有
%(messsage)s:用户输出的消息
Logger的继承:
子日志对象可以使用父日志对象的一切格式,且也可以自己设置,并子日志对象每产生一条日志信息,父对象同样可以接收
1 """ 2 logging配置 3 """ 4 5 import os 6 import logging.config 7 8 # 定义三种日志输出格式 开始 9 10 standard_format = '[%(asctime)s][%(threadName)s:%(thread)d][task_id:%(name)s][%(filename)s:%(lineno)d]' 11 '[%(levelname)s][%(message)s]' #其中name为getlogger指定的名字 12 13 simple_format = '[%(levelname)s][%(asctime)s][%(filename)s:%(lineno)d]%(message)s' 14 15 id_simple_format = '[%(levelname)s][%(asctime)s] %(message)s' 16 17 # 定义日志输出格式 结束 18 19 logfile_dir = os.path.dirname(os.path.abspath(__file__)) # log文件的目录 20 21 logfile_name = 'all2.log' # log文件名 22 23 # 如果不存在定义的日志目录就创建一个 24 if not os.path.isdir(logfile_dir): 25 os.mkdir(logfile_dir) 26 27 # log文件的全路径 28 logfile_path = os.path.join(logfile_dir, logfile_name) 29 30 # log配置字典 31 LOGGING_DIC = { 32 'version': 1, 33 'disable_existing_loggers': False, 34 'formatters': { 35 'standard': { 36 'format': standard_format 37 }, 38 'simple': { 39 'format': simple_format 40 }, 41 }, 42 'filters': {}, 43 'handlers': { 44 #打印到终端的日志 45 'console': { 46 'level': 'DEBUG', 47 'class': 'logging.StreamHandler', # 打印到屏幕 48 'formatter': 'simple' 49 }, 50 #打印到文件的日志,收集info及以上的日志 51 'default': { 52 'level': 'DEBUG', 53 'class': 'logging.handlers.RotatingFileHandler', # 保存到文件 54 'formatter': 'standard', 55 'filename': logfile_path, # 日志文件 56 'maxBytes': 1024*1024*5, # 日志大小 5M 57 'backupCount': 5, 58 'encoding': 'utf-8', # 日志文件的编码,再也不用担心中文log乱码了 59 }, 60 }, 61 'loggers': { 62 #logging.getLogger(__name__)拿到的logger配置 63 '': { 64 'handlers': ['default', 'console'], # 这里把上面定义的两个handler都加上,即log数据既写入文件又打印到屏幕 65 'level': 'DEBUG', 66 'propagate': True, # 向上(更高level的logger)传递 67 }, 68 }, 69 } 70 71 72 def load_my_logging_cfg(): 73 logging.config.dictConfig(LOGGING_DIC) # 导入上面定义的logging配置 74 logger = logging.getLogger(__name__) # 生成一个log实例 75 logger.info('It works!') # 记录该文件的运行状态 76 77 if __name__ == '__main__': 78 load_my_logging_cfg()
1 注意注意注意: 2 3 4 #1、有了上述方式我们的好处是:所有与logging模块有关的配置都写到字典中就可以了,更加清晰,方便管理 5 6 7 #2、我们需要解决的问题是: 8 1、从字典加载配置:logging.config.dictConfig(settings.LOGGING_DIC) 9 10 2、拿到logger对象来产生日志 11 logger对象都是配置到字典的loggers 键对应的子字典中的 12 按照我们对logging模块的理解,要想获取某个东西都是通过名字,也就是key来获取的 13 于是我们要获取不同的logger对象就是 14 logger=logging.getLogger('loggers子字典的key名') 15 16 17 但问题是:如果我们想要不同logger名的logger对象都共用一段配置,那么肯定不能在loggers子字典中定义n个key 18 'loggers': { 19 'l1': { 20 'handlers': ['default', 'console'], # 21 'level': 'DEBUG', 22 'propagate': True, # 向上(更高level的logger)传递 23 }, 24 'l2: { 25 'handlers': ['default', 'console' ], 26 'level': 'DEBUG', 27 'propagate': False, # 向上(更高level的logger)传递 28 }, 29 'l3': { 30 'handlers': ['default', 'console'], # 31 'level': 'DEBUG', 32 'propagate': True, # 向上(更高level的logger)传递 33 }, 34 35 } 36 37 38 #我们的解决方式是,定义一个空的key 39 'loggers': { 40 '': { 41 'handlers': ['default', 'console'], 42 'level': 'DEBUG', 43 'propagate': True, 44 }, 45 46 } 47 48 这样我们再取logger对象时 49 logging.getLogger(__name__),不同的文件__name__不同,这保证了打印日志时标识信息不同,但是拿着该名字去loggers里找key名时却发现找不到,于是默认使用key=''的配置
shelve
用于序列化的模块
shelve模块只有一个函数,就是open用于打开一个文件
打开之后,操作方式与字典完全一致,你可以把它当做字典,而且可以把字典给完成序列化
同样支持python所有的基础数据类型
该模块序列化得到的数据,只能被该模块使用,其他语言没有此模块不能使用,即无法实现跨平台
sys模块
sys是system的缩写,表示系统
os operation system指的是操作系统
而sys值指的是python解释器
sys.argv用于接收操作系统调用解释器时传入的参数
sys.exit(0)退出解释器,0表示正常退出
sys.path添加环境变量
sys.argv用于获取调用解释器参数
1 sys.argv 命令行参数List,第一个元素是程序本身路径 2 sys.exit(n) 退出程序,正常退出时exit(0) 3 sys.version 获取Python解释程序的版本信息 4 sys.maxint 最大的Int值 5 sys.path 返回模块的搜索路径,初始化时使用PYTHONPATH环境变量的值 6 sys.platform 返回操作系统平台名称