国产成人精品久久免费动漫-国产成人精品天堂-国产成人精品区在线观看-国产成人精品日本-a级毛片无码免费真人-a级毛片毛片免费观看久潮喷

您的位置:首頁技術文章
文章詳情頁

詳解python logging日志傳輸

瀏覽:74日期:2022-07-19 09:25:37

1.生成日志并通過http傳輸出去(通過HTTPHandler方式):

#生成并發(fā)送日志import loggingfrom logging.handlers import HTTPHandlerimport logging.configdef save(): logger = logging.getLogger(__name__) # 生成一個log實例,如果括號為空則返回root logger hh = HTTPHandler(host=’127.0.0.1:5000’, url=’/log’, method=’POST’) #用HTTPHandler直接發(fā)送日志,而并不是寫文件再傳文件。 logger.setLevel(logging.INFO) #設置日志最低輸出級別為info logger.addHandler(hh) #添加Handler對象給記錄器(為logger添加的日志處理器,可以自定義日志處理器讓其輸出到其他地方) logger.info(’存入600元’) # 輸出日志,內容為‘存入600元’save()

2.用flask接收傳過來的日志:

#flask接收日志from flask import Flask,requestapp = Flask(__name__)@app.route(’/log’,methods=[’POST’])def say_hello(): #查看傳過來的數(shù)據(jù)格式: print(request.mimetype) #HTTPHandler傳過來的是個form表單 print(request.form.to_dict()) return ’<h1>Hello, Flask!</h1>’if __name__ == ’__main__’: app.run()輸出:#這是傳過來的數(shù)據(jù)格式,是個form表單application/x-www-form-urlencoded #這是form.to_dict解析出來的內容(直接解析成了字典){’name’: ’__main__’, ’msg’: ’存入600元’, ’args’: ’()’, ’levelname’: ’INFO’, ’levelno’: ’20’, ’pathname’: ’C:/Users/huawei/Desktop/code/log/send_log.py’, ’filename’: ’send_log.py’, ’module’: ’send_log’, ’exc_info’: ’None’, ’exc_text’: ’None’, ’stack_info’: ’None’, ’lineno’: ’15’, ’funcName’: ’save’, ’created’: ’1593581146.172768’, ’msecs’: ’172.76811599731445’, ’relativeCreated’: ’176.5270233154297’, ’thread’: ’13904’, ’threadName’: ’MainThread’, ’processName’: ’MainProcess’, ’process’: ’3656’}

3.logging模塊介紹

Python的logging模塊提供了通用的日志系統(tǒng),熟練使用logging模塊可以方便開發(fā)者開發(fā)第三方模塊或者是自己的Python應用。同樣這個模塊提供不同的日志級別,并可以采用不同的方式記錄日志,比如文件,HTTP、GET/POST,SMTP,Socket等,甚至可以自己實現(xiàn)具體的日志記錄方式。下文我將主要介紹如何使用文件方式記錄log。

1.基本概念:

logging模塊包括logger,handler,filter,formatter這四個基本概念。

logging模塊與log4j的機制是一樣的,只是具體的實現(xiàn)細節(jié)不同。模塊提供logger,handler,filter,formatter。

logger:提供日志接口,供應用代碼使用。logger最長用的操作有兩類:配置和發(fā)送日志消息。可以通過logging.getLogger(name)獲取logger對象,如果不指定name則返回root對象,多次使用相同的name調用getLogger方法返回同一個logger對象。 handler:將日志記錄(log record)發(fā)送到合適的目的地(destination),比如文件,socket等。一個logger對象可以通過addHandler方法添加0到多個handler,每個handler又可以定義不同日志級別,以實現(xiàn)日志分級過濾顯示。 filter:提供一種優(yōu)雅的方式?jīng)Q定一個日志記錄是否發(fā)送到handler。 formatter:指定日志記錄輸出的具體格式。formatter的構造方法需要兩個參數(shù):消息的格式字符串和日期字符串,這兩個參數(shù)都是可選的。

與log4j類似,logger,handler和日志消息的調用可以有具體的日志級別(Level),只有在日志消息的級別大于logger和handler的級別。

import logginglogging.basicConfig(level=logging.DEBUG, format=’%(asctime)s %(filename)s[line:%(lineno)d] %(levelname)s %(message)s’, datefmt=’%a, %d %b %Y %H:%M:%S’, filename=’myapp.log’, filemode=’w’)##################################################################################################定義一個StreamHandler,將INFO級別或更高的日志信息打印到標準錯誤,并將其添加到當前的日志處理對象#console = logging.StreamHandler()console.setLevel(logging.INFO)formatter = logging.Formatter(’%(name)-12s: %(levelname)-8s %(message)s’)console.setFormatter(formatter)logging.getLogger(’’).addHandler(console)#################################################################################################logging.debug(’This is debug message’)logging.info(’This is info message’)logging.warning(’This is warning message’) 屏幕上打印:root : INFO This is info messageroot : WARNING This is warning message./myapp.log文件中內容為:Sun, 24 May 2009 21:48:54 demo2.py[line:11] DEBUG This is debug messageSun, 24 May 2009 21:48:54 demo2.py[line:12] INFO This is info messageSun, 24 May 2009 21:48:54 demo2.py[line:13] WARNING This is warning message

2.主要用法:

logging.StreamHandler: 日志輸出到流,可以是sys.stderr、sys.stdout或者文件

logging.FileHandler: 日志輸出到文件

日志回滾方式,實際使用時用RotatingFileHandler和TimedRotatingFileHandler

logging.handlers.BaseRotatingHandler

logging.handlers.RotatingFileHandler

logging.handlers.TimedRotatingFileHandler

logging.handlers.SocketHandler: 遠程輸出日志到TCP/IP sockets

logging.handlers.DatagramHandler: 遠程輸出日志到UDP sockets

logging.handlers.SMTPHandler: 遠程輸出日志到郵件地址

logging.handlers.SysLogHandler: 日志輸出到syslog

logging.handlers.NTEventLogHandler: 遠程輸出日志到Windows NT/2000/XP的事件日志

logging.handlers.MemoryHandler: 日志輸出到內存中的制定buffer

logging.handlers.HTTPHandler: 通過'GET'或'POST'遠程輸出到HTTP服務器

舉例:

import loggingimport sys# 獲取logger實例,如果參數(shù)為空則返回root loggerlogger = logging.getLogger('AppName')# 指定logger輸出格式formatter = logging.Formatter(’%(asctime)s %(levelname)-8s: %(message)s’)# 文件日志file_handler = logging.FileHandler('test.log')file_handler.setFormatter(formatter) # 可以通過setFormatter指定輸出格式# 控制臺日志console_handler = logging.StreamHandler(sys.stdout)console_handler.formatter = formatter # 也可以直接給formatter賦值# 為logger添加的日志處理器,可以自定義日志處理器讓其輸出到其他地方logger.addHandler(file_handler)logger.addHandler(console_handler)# 指定日志的最低輸出級別,默認為WARN級別logger.setLevel(logging.INFO)# 輸出不同級別的loglogger.debug(’this is debug info’)logger.info(’this is information’)logger.warn(’this is warning message’)logger.error(’this is error message’)logger.fatal(’this is fatal message, it is same as logger.critical’)logger.critical(’this is critical message’)# 2016-10-08 21:59:19,493 INFO : this is information# 2016-10-08 21:59:19,493 WARNING : this is warning message# 2016-10-08 21:59:19,493 ERROR : this is error message# 2016-10-08 21:59:19,493 CRITICAL: this is fatal message, it is same as logger.critical# 2016-10-08 21:59:19,493 CRITICAL: this is critical message# 移除一些日志處理器logger.removeHandler(file_handler)

4.概述:

python的logging模塊(logging是線程安全的)給應用程序提供了標準的日志信息輸出接口。logging不僅支持把日志輸出到文件,還支持把日志輸出到TCP/UDP服務器,EMAIL服務器,HTTP服務器,UNIX的syslog系統(tǒng)等。在logging中主要有四個概念:logger、handler、filter和formatter,下面會分別介紹。

1.logger

Logger對象扮演了三重角色:

它給應用程序暴漏了幾個方法,以便應用程序能在運行時記錄日志。

Logger對象根據(jù)日志的級別或根據(jù)Filter對象,來決定記錄哪些日志。

Logger對象負責把日志信息傳遞給相關的handler。

在Logger對象中,最常使用的方法分為兩類:configuration,message sending。 configuration方法包括:

setLevel(level)

setLevel(level)方法用來設置logger的日志級別,如果日志的級別低于setLevel(level)方法設置的值,那么logger不會處理它。

logging模塊內建的日志級別有:

CRITICAL = 50FATAL = CRITICALERROR = 40WARNING = 30WARN = WARNINGINFO = 20DEBUG = 10NOTSET = 0 (數(shù)值越大級別越高)addFilter(filter)removeFilter(filter)addHandler(handler)removeHandler(handler)

message sending方法包括:

debug(log_message, [*args[, **kwargs]])

使用DEBUG級別,記錄log_message % args。

為了記錄異常信息,需要將關鍵字參數(shù)exc_info設置為一個true值。

logger.debug('Houston, we have a %s', 'thorny problem', exc_info=1)info(log_message, [*args[, **kwargs]])

使用INFO級別,記錄log_message % args。

為了記錄異常信息,需要將關鍵字參數(shù)exc_info設置為一個true值。

logger.info('Houston, we have a %s', 'interesting problem', exc_info=1)warning(log_message, [*args[, **kwargs]])

使用WARNING級別,記錄log_message % args。

為了記錄異常信息,需要將關鍵字參數(shù)exc_info設置為一個true值。

logger.warning('Houston, we have a %s', 'bit of a problem', exc_info=1)error(log_message, [*args[, **kwargs]])

使用Error級別,記錄log_message % args。

為了記錄異常信息,需要將關鍵字參數(shù)exc_info設置為一個true值。

logger.error('Houston, we have a %s', 'major problem', exc_info=1)critical(log_message, [*args[, **kwargs]])

使用CRITICAL級別,記錄log_message % args。

為了記錄異常信息,需要將關鍵字參數(shù)exc_info設置為一個true值。

logger.critical('Houston, we have a %s', 'major disaster', exc_info=1)exception(message[, *args]) self.error(*((msg,) + args), **{’exc_info’: 1})log(log_level, log_message, [*args[, **kwargs]])

使用整型的級別level,記錄log_message % args。

為了記錄異常信息,需要將關鍵字參數(shù)exc_info設置為一個true值。

logger.log(level, 'We have a %s', 'mysterious problem', exc_info=1)logging.getLogger([name])

方法返回一個Logger實例的引用,如果提供了name參數(shù),那么它就是這個Logger實例的名稱,如果沒提供name參數(shù),那么這個Logger實例的名稱是root。

可以通過Logger實例的name屬性,來查看Logger實例的名稱。

Logger實例的名稱是使用句號(.)分隔的多級結構。

在這種命名方式中,后面的logger是前面的logger的子(父子logger只是簡單的通過命名來識別),比如:有一個名稱為foo的logger,那么諸如foo.bar、foo.bar.baz和foo.bam這樣的logger都是foo這個logger的子logger。

子logger會自動繼承父logger的定義和配置。

使用相同的名稱多次調用logging.getLogger([name])方法,會返回同一個logger對象的引用。

這個規(guī)則不僅僅在同一個module有效,而且對在同一個Python解釋器進程的多個module也有效。

因此應用程序可以在一個module中定義一個父logger,然后在其他module中繼承這個logger,而不必把所有的logger都配置一遍

2.handler

handler實例負責把日志事件分發(fā)到具體的目的地。logger對象可以使用addHandler()方法,添加零個或多個handler對象到它自身。一個常見的場景是:應用程序可能希望把所有的日志都記錄到一個log文件,所有的ERROR及以上級別的日志都記錄到stdout,所有的CRITICAL級別的日志都發(fā)送到一個email地址。這個場景需要三個獨立的handler,每個handler負責把特定級別的日志發(fā)送到特定的地方。

下面是logging模塊內置的handler:StreamHandlerFileHandlerRotatingFileHandlerTimedRotatingFileHandlerSocketHandlerDatagramHandlerSysLogHandlerNTEventLogHandlerSMTPHandlerMemoryHandlerHTTPHandler

內置的handler提供了下面的配置方法:

setLevel(level) handler對象的setLevel()方法,與logger對象的setLevel()方法一樣,也是用于設置一個日志級別,如果日志的級別低于setLevel()方法設置的值,那么handler不會處理它。 setFormatter(formatter) addFilter(filter) removeFilter(filter)

應用程序代碼不應該直接實例化和使用handler。logging.Handler是一個定義了所有的handler都應該實現(xiàn)的接口和建立了子類能夠使用(或重寫)的一些默認行為的基類。

自定義Handler 自定義的handler必須繼承自logging.Handler,且實現(xiàn)下面的方法:

class Handler(Filterer): def emit(self, record): ''' Do whatever it takes to actually log the specified logging record. This version is intended to be implemented by subclasses and so raises a NotImplementedError. ''' raise NotImplementedError, ’emit must be implemented ’ ’by Handler subclasses’ def flush(self): ''' Ensure all logging output has been flushed. This version does nothing and is intended to be implemented by subclasses. ''' pass def close(self): ''' Tidy up any resources used by the handler. This version does removes the handler from an internal list of handlers which is closed when shutdown() is called. Subclasses should ensure that this gets called from overridden close() methods. ''' #get the module data lock, as we’re updating a shared structure. _acquireLock() try: #unlikely to raise an exception, but you never know... if self in _handlers: del _handlers[self] if self in _handlerList: _handlerList.remove(self) finally: _releaseLock()

其中,emit(record)方法負責執(zhí)行真正地記錄日志所需的一切事情,在logging.Handler的子類中必須實現(xiàn)這個方法。close()方法負責清理handler所使用的資源(在Python解釋器退出的時候,會調用所有的handler的flush()和close()方法),logging.Handler的子類應該確保在重寫close()方法的時候,調用父類的該方法。

下面分析logging.StreamHandler的源代碼:

class StreamHandler(Handler): def __init__(self, strm=None): Handler.__init__(self) if strm is None: strm = sys.stderr self.stream = strm def flush(self): if self.stream and hasattr(self.stream, 'flush'): self.stream.flush() def emit(self, record): try: msg = self.format(record) stream = self.stream fs = '%sn' if not hasattr(types, 'UnicodeType'): #if no unicode support... stream.write(fs % msg) else: try: if (isinstance(msg, unicode) and getattr(stream, ’encoding’, None)): fs = fs.decode(stream.encoding) try: stream.write(fs % msg) except UnicodeEncodeError: #Printing to terminals sometimes fails. For example, #with an encoding of ’cp1251’, the above write will #work if written to a stream opened or wrapped by #the codecs module, but fail when writing to a #terminal even when the codepage is set to cp1251. #An extra encoding step seems to be needed. stream.write((fs % msg).encode(stream.encoding)) else: stream.write(fs % msg) except UnicodeError: stream.write(fs % msg.encode('UTF-8')) self.flush() except (KeyboardInterrupt, SystemExit): raise except: self.handleError(record)

在構造函數(shù)中,如果提供了strm參數(shù),那么它就是要輸出到的流,如果沒提供,那么就會將日志輸出到標準錯誤輸出流sys.stderr。

flush()方法的作用是:刷新self.stream內部的I/O緩沖區(qū)。每次emit日志之后都會調用這個方法,將日志從I/O緩沖區(qū)sync到self.stream。 emit(record)方法的作用是:將LogRecord對象(record)記錄到self.stream。emit(record)方法首先調用基類logging.Handler提供的format(record)方法,該方法會根據(jù)設置的Formatter對象來格式化record對象,得到要記錄的字符串msg。然后對fs(fs其實就是在msg的尾部增加一個換行’n’)進行一系列的編碼解碼,將它寫入到self.stream。最后再刷新self.stream。在emit(record)調用期間發(fā)生的異常,應該調用logging.Handler提供的handleError(record)方法來處理。

3.filter

Filter對象用于對LogRecord對象執(zhí)行過濾,logger和handler都可以使用filter來過濾record。下面用一個列子來說明Filter基類的作用:

如果使用A.B實例化一個filter,那么它允許名稱為A.B,A.B.C,A.B.C.D這樣的logger記錄的日志通過,不允許名稱為A.BB,B.A.B這樣的logger記錄的日志通過。

如果使用空字符串實例化一個filter,那么它允許所有的事件通過。

Filter基類有一個方法叫filter(record),它用來決定指定的record(LogRecord對象)是否被記錄。如果該方法返回0,則不記錄record;返回非0則記錄record。

Filterer(注意:不是Filter)是logger和handler的基類。它提供了方法來添加和刪除filter,并且提供了filter(record)方法用于過濾record,該方法默認允許record被記錄,但是任何filter都可以否決這個默認行為,如果想要丟棄record,filter(record)方法應該返回0,否則應該返回非0。

4.formatter

Formatter對象用于把一個LogRecord對象轉換成文本,它定義了日志的格式、結構。與logging.Handler類不同,應用程序可以直接實例化Formatter類,如果需要也可以子類化Formatter,以便定

制一些行為。

Formatter的構造函數(shù)接受兩個參數(shù):第一個參數(shù)是用于日志信息的格式化字符串;第二個參數(shù)是用于日期的格式化字符串。第二個參數(shù)可選的,默認值是%Y-%m-%d %H:%M:%S。

日志信息的格式化字符串用%(<dictionary key>)s風格的字符串做替換。

下面是替換字符串和它們所代表的含義:

%(name)slogger的名稱%(levelno)s日志級別的數(shù)字表現(xiàn)形式%(levelname)s日志級別的文本表現(xiàn)形式%(pathname)s調用logging的源文件的全路徑名%(filename)spathname的文件名部分%(module)s模塊名(filename的名稱部分)%(lineno)d調用logging的行號%(funcName)s函數(shù)名%(created)fLogRecord的創(chuàng)建時間(time.time()的返回值)%(asctime)sLogRecord的創(chuàng)建時間的文本表現(xiàn)形式%(msecs)d創(chuàng)建時間的毫秒部分%(relativeCreated)d LogRecord的創(chuàng)建時間,單位是毫秒。這個時間是相對logging模塊被加載的時間的(通常就是應用程序啟動的時間)。%(thread)d線程ID%(threadName)s線程名稱%(process)d進程ID%(message)srecord.getMessage()的返回結果。

舉例:

配置logging

下面是一個簡單的例子,它會向標準輸出打印日志:

import logging import sys logger = logging.getLogger(__name__) filter = logging.Filter(__name__) formatter = logging.Formatter('%(asctime)s|%(name)-12s|%(message)s', '%F %T')stream_handler = logging.StreamHandler(sys.stdout) stream_handler.addFilter(filter) stream_handler.setLevel(logging.DEBUG) stream_handler.setFormatter(formatter)logger.setLevel(logging.DEBUG) logger.addFilter(filter) logger.addHandler(stream_handler)if __name__ == '__main__': logger.info('info')運行這個腳本,輸出結果是:2015-12-16 13:52:17|__main__ |info

使用配置文件,配置logging

下面是一個使用配置文件,配置logging的例子:

import logging import logging.configlogging.config.fileConfig('logging.conf')if __name__ == '__main__': logger = logging.getLogger('test_logging.sublogger') logger.info('info')

logging.conf如下:

[loggers]keys = root,logger[handlers]keys = stream_handler[formatters]keys = formatter[logger_root]handlers = stream_handler[logger_logger]handlers = stream_handler level = DEBUG propagate = 1 qualname = test_logging[handler_stream_handler]class = StreamHandler args = (sys.stdout,) formatter = formatter level = DEBUG[formatter_formatter]format = %(asctime)s|%(name)-12s|%(message)s datefmt = %F %T

需要解釋的地方有兩處:第一個是logger_xxxsection中的propagate選項,在logger對象把record傳遞給所有相關的handler的時候,會(逐級向上)尋找這個logger和它所有的父logger的全部handler。在尋找過程中,如果logger對象的propagate屬性被設置為1,那么就繼續(xù)向上尋找;如果某個logger的propagate屬性被設置為0,那么就會停止搜尋。

第二個是logger_xxxsection中的qualname選項,它其實就是logger的名稱。

使用配置文件的時候,必須定義root logger。

最酷的listen(port)函數(shù)

logging.config.listen(port)函數(shù)可以讓應用程序在一個socket上監(jiān)聽新的配置信息,達到在運行時改變配置,而不用重啟應用程序的目的。

監(jiān)聽程序:

import logging.config import logging import timelogging.config.fileConfig('logging.conf') logger = logging.getLogger('test_logging.listen')t = logging.config.listen(9999) t.setDaemon(True) t.start()try: while True: logger.info(’running.’) time.sleep(3)except (KeyboardInterrupt, SystemExit, Exception): logging.config.stopListening()

發(fā)送新的配置信息程序:

import socket import structHOST = ’localhost’ PORT = 9999 s = socket.socket(socket.AF_INET, socket.SOCK_STREAM) s.connect((HOST, PORT)) print 'connected...' data_to_send = open('logging.conf').read() s.send(struct.pack('>L', len(data_to_send))) s.send(data_to_send) print 'closing...' s.close()

以上就是詳解python logging日志傳輸?shù)脑敿殐热荩嚓P于python logging日志傳輸?shù)馁Y料請關注好吧啦網(wǎng)其它相關文章!

標簽: Python 編程
相關文章:
主站蜘蛛池模板: 免费观看欧美成人禁片 | 一本不卡| 久久国产香蕉 | 日本视频在线免费观看 | 国产亚洲欧美日韩在线看片 | 国产17部性孕妇孕交在线 | 亚洲小视频 | 免费在线精品视频 | 国产精品1页 | 在线免费观看国产视频 | 免费观看视频成人国产 | 欧美黄免在线播放 | 高清波多野结衣一区二区三区 | 亚洲一区二区中文字幕 | 日本草草视频在线观看 | 91久久99久91天天拍拍 | 日本不卡在线一区二区三区视频 | 午夜剧场成年 | 99爱视频精品免视看 | 日韩欧美在线视频观看 | 香蕉视频老司机 | 日本久久免费 | 久久影院视频 | 高清国产精品久久久久 | 一级做a爰片久久毛片看看 一级做a爰片久久毛片鸭王 | 久草在在线视频 | 久久91精品国产一区二区 | 免费一级特黄3大片视频 | 国产精品久久不卡日韩美女 | 女人毛片a毛片久久人人 | 美女扒开双腿让男人桶 | 日韩一区二区不卡中文字幕 | 国产精品久久久久影院色老大 | 九九国产在线视频 | 成人永久免费视频网站在线观看 | 亚洲六月丁香六月婷婷蜜芽 | 99久热在线精品视频播 | 我要看欧美精品一级毛片 | 国产亚洲精品一区999 | 日本一区三区二区三区四区 | 欧美另类精品一区二区三区 |