python logging重復(fù)記錄日志問(wèn)題的解決方法
日志相關(guān)概念
日志是一種可以追蹤某些軟件運(yùn)行時(shí)所發(fā)生事件的方法。軟件開發(fā)人員可以向他們的代碼中調(diào)用日志記錄相關(guān)的方法來(lái)表明發(fā)生了某些事情。一個(gè)事件可以用一個(gè)可包含可選變量數(shù)據(jù)的消息來(lái)描述。此外,事件也有重要性的概念,這個(gè)重要性也可以被稱為嚴(yán)重性級(jí)別(level)。
日志的作用
通過(guò)log的分析,可以方便用戶了解系統(tǒng)或軟件、應(yīng)用的運(yùn)行情況;如果你的應(yīng)用log足夠豐富,也可以分析以往用戶的操作行為、類型喜好、地域分布或其他更多信息;如果一個(gè)應(yīng)用的log同時(shí)也分了多個(gè)級(jí)別,那么可以很輕易地分析得到該應(yīng)用的健康狀況,及時(shí)發(fā)現(xiàn)問(wèn)題并快速定位、解決問(wèn)題,補(bǔ)救損失。
簡(jiǎn)單來(lái)講就是,我們通過(guò)記錄和分析日志可以了解一個(gè)系統(tǒng)或軟件程序運(yùn)行情況是否正常,也可以在應(yīng)用程序出現(xiàn)故障時(shí)快速定位問(wèn)題。比如,做運(yùn)維的同學(xué),在接收到報(bào)警或各種問(wèn)題反饋后,進(jìn)行問(wèn)題排查時(shí)通常都會(huì)先去看各種日志,大部分問(wèn)題都可以在日志中找到答案。再比如,做開發(fā)的同學(xué),可以通過(guò)IDE控制臺(tái)上輸出的各種日志進(jìn)行程序調(diào)試。對(duì)于運(yùn)維老司機(jī)或者有經(jīng)驗(yàn)的開發(fā)人員,可以快速的通過(guò)日志定位到問(wèn)題的根源。可見,日志的重要性不可小覷。日志的作用可以簡(jiǎn)單總結(jié)為以下3點(diǎn):
- 程序調(diào)試
- 了解軟件程序運(yùn)行情況,是否正常
- 軟件程序運(yùn)行故障分析與問(wèn)題定位
如果應(yīng)用的日志信息足夠詳細(xì)和豐富,還可以用來(lái)做用戶行為分析,如:分析用戶的操作行為、類型洗好、地域分布以及其它更多的信息,由此可以實(shí)現(xiàn)改進(jìn)業(yè)務(wù)、提高商業(yè)利益。
發(fā)現(xiàn)問(wèn)題
最近在用Python的logging模塊記錄日志時(shí),遇到了重復(fù)記錄日志的問(wèn)題,第一條記錄寫一次,第二條記錄寫兩次,第三條記錄寫三次。。。很頭疼,這樣記日志可不行。網(wǎng)上搜索到了原因與解決方案:
原因:沒(méi)有移除handler
解決:在日志記錄完之后removeHandler
修改前示例代碼:
import logging def log(message): logger = logging.getLogger('testlog') streamhandler = logging.StreamHandler() streamhandler.setLevel(logging.ERROR) formatter = logging.Formatter('%(asctime)s - %(levelname)s - %(name)s - %(message)s') streamhandler.setFormatter(formatter) logger.addHandler(streamhandler) logger.error(message) if __name__ == '__main__': log('hi') log('hi too') log('hi three')
修改前輸出結(jié)果:
2016-07-08 09:17:29,740 - ERROR - testlog - hi
2016-07-08 09:17:29,740 - ERROR - testlog - hi too
2016-07-08 09:17:29,740 - ERROR - testlog - hi too
2016-07-08 09:17:29,740 - ERROR - testlog - hi three
2016-07-08 09:17:29,740 - ERROR - testlog - hi three
2016-07-08 09:17:29,740 - ERROR - testlog - hi three
修改后示例代碼:
import logging def log(message): logger = logging.getLogger('testlog') streamhandler = logging.StreamHandler() streamhandler.setLevel(logging.ERROR) formatter = logging.Formatter('%(asctime)s - %(levelname)s - %(name)s - %(message)s') streamhandler.setFormatter(formatter) logger.addHandler(streamhandler) logger.error(message) # 添加下面一句,在記錄日志之后移除句柄 logger.removeHandler(streamhandler) if __name__ == '__main__': log('hi') log('hi too') log('hi three')
修改后輸出結(jié)果:
2016-07-08 09:32:28,206 - ERROR - testlog - hi
2016-07-08 09:32:28,206 - ERROR - testlog - hi too
2016-07-08 09:32:28,206 - ERROR - testlog - hi three
深度解析:
Google之后,大概搞明白了,就是你第二次調(diào)用log的時(shí)候,根據(jù)getLogger(name)里的name獲取同一個(gè)logger,而這個(gè)logger里已經(jīng)有了第一次你添加的handler,第二次調(diào)用又添加了一個(gè)handler,所以,這個(gè)logger里有了兩個(gè)同樣的handler,以此類推,調(diào)用幾次就會(huì)有幾個(gè)handler。。
所以這里有以下幾個(gè)解決辦法:
- 每次創(chuàng)建不同name的logger,每次都是新logger,不會(huì)有添加多個(gè)handler的問(wèn)題。(ps:這個(gè)辦法太笨,不過(guò)我之前就是這么干的。。)
- 像上面一樣每次記錄完日志之后,調(diào)用removeHandler()把這個(gè)logger里的handler移除掉。
- 在log方法里做判斷,如果這個(gè)logger已有handler,則不再添加handler。
- 與方法2一樣,不過(guò)把用pop把logger的handler列表中的handler移除。
下面是方法3與方法4的代碼示例:
方法3:
import logging def log(message): logger = logging.getLogger('testlog') # 這里進(jìn)行判斷,如果logger.handlers列表為空,則添加,否則,直接去寫日志 if not logger.handlers: streamhandler = logging.StreamHandler() streamhandler.setLevel(logging.ERROR) formatter = logging.Formatter('%(asctime)s - %(levelname)s - %(name)s - %(message)s') streamhandler.setFormatter(formatter) logger.addHandler(streamhandler) logger.error(message) if __name__ == '__main__': log('hi') log('hi too') log('hi three')
方法4:
import logging def log(message): logger = logging.getLogger('testlog') streamhandler = logging.StreamHandler() streamhandler.setLevel(logging.ERROR) formatter = logging.Formatter('%(asctime)s - %(levelname)s - %(name)s - %(message)s') streamhandler.setFormatter(formatter) logger.addHandler(streamhandler) logger.error(message) # 用pop方法把logger.handlers列表中的handler移除,注意如果你add了多個(gè)handler,這里需多次pop,或者可以直接為handlers列表賦空值 logger.handlers.pop() # logger.handler = [] if __name__ == '__main__': log('hi') log('hi too') log('hi three')
這幾種方法都親試可行,個(gè)人覺得方法3判斷更加優(yōu)雅,你覺得呢?
總結(jié)
以上就是這篇文章的全部?jī)?nèi)容了,希望本文的內(nèi)容對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,如果有疑問(wèn)大家可以留言交流,謝謝大家對(duì)腳本之家的支持。
- Python中l(wèi)ogging日志記錄到文件及自動(dòng)分割的操作代碼
- python3中的logging記錄日志實(shí)現(xiàn)過(guò)程及封裝成類的操作
- Python loguru日志庫(kù)之高效輸出控制臺(tái)日志和日志記錄
- python多進(jìn)程下實(shí)現(xiàn)日志記錄按時(shí)間分割
- 記錄Python腳本的運(yùn)行日志的方法
- Python Logging 日志記錄入門學(xué)習(xí)
- Python 記錄日志的靈活性和可配置性介紹
- python日志記錄模塊實(shí)例及改進(jìn)
- Python記錄詳細(xì)調(diào)用堆棧日志的方法
- Python 程序員必須掌握的日志記錄
相關(guān)文章
python數(shù)據(jù)可視化自制職位分析生成崗位分析數(shù)據(jù)報(bào)表
之前網(wǎng)上也有不少關(guān)于行業(yè)的分析數(shù)據(jù),今天我們就根據(jù)不同崗位,公司類型規(guī)模,學(xué)歷要求,薪資分布等來(lái)進(jìn)行分析,把職位分析功能集合封裝起來(lái),做成一個(gè)小工具分享給大家吧2021-09-09Python+PyQt5實(shí)現(xiàn)自動(dòng)點(diǎn)擊神器
這篇文章主要為大家詳細(xì)介紹了如何利用Python和PyQt5實(shí)現(xiàn)自動(dòng)點(diǎn)擊神器,旨在解決重復(fù)性的點(diǎn)擊工作,解放雙手,具有及時(shí)性和準(zhǔn)確性,需要的可以參考下2024-01-01深入分析python數(shù)據(jù)挖掘 Json結(jié)構(gòu)分析
這篇文章通過(guò)實(shí)例給大家分析總結(jié)了python數(shù)據(jù)挖掘以及Json結(jié)構(gòu)分析的相關(guān)知識(shí)點(diǎn),對(duì)此有興趣的朋友參考下。2018-04-04pyinstaller打包單個(gè)exe后無(wú)法執(zhí)行錯(cuò)誤的解決方法
今天小編就為大家分享一篇pyinstaller打包單個(gè)exe后無(wú)法執(zhí)行錯(cuò)誤的解決方法,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2019-06-06詳解pandas映射與數(shù)據(jù)轉(zhuǎn)換
這篇文章主要介紹了pandas映射與數(shù)據(jù)轉(zhuǎn)換的相關(guān)資料,幫助大家更好的利用python進(jìn)行數(shù)據(jù)分析,感興趣的朋友可以了解下2021-01-01Python生成可執(zhí)行文件之PyInstaller庫(kù)的使用方式
PyInstaller是一個(gè)十分有用的第三方庫(kù),通過(guò)對(duì)源文件打包,Python程序可以在沒(méi)有安裝Python的環(huán)境中運(yùn)行,也可以作為一個(gè)獨(dú)立文件方便傳遞和管理,下面這篇文章主要給大家介紹了關(guān)于Python生成可執(zhí)行文件之PyInstaller庫(kù)的使用方式,需要的朋友可以參考下2022-04-04使用Python的urllib和urllib2模塊制作爬蟲的實(shí)例教程
這篇文章主要介紹了使用Python的urllib和urllib2模塊制作爬蟲的實(shí)例教程,展現(xiàn)了這兩個(gè)常用爬蟲制作模塊的基本用法,極度推薦!需要的朋友可以參考下2016-01-01