Logback配置文件這么寫(TPS提高10倍)
通過閱讀本篇文章將了解到
1.日志輸出到文件并根據(jù)LEVEL級別將日志分類保存到不同文件
2.通過異步輸出日志減少磁盤IO提高性能
3.異步輸出日志的原理
配置文件logback-spring.xml
SpringBoot工程自帶logback和slf4j的依賴，所以重點放在編寫配置文件上，需要引入什么依賴，日志依賴沖突統(tǒng)統(tǒng)都不需要我們管了。logback框架會默認(rèn)加載classpath下命名為logback-spring或logback的配置文件。將所有日志都存儲在一個文件中文件大小也隨著應(yīng)用的運(yùn)行越來越大并且不好排查問題，正確的做法應(yīng)該是將error日志和其他日志分開，并且不同級別的日志根據(jù)時間段進(jìn)行記錄存儲。
<?xml version="1.0" encoding="utf-8"?>
<configuration>
<property resource="logback.properties"/>
<appender name="CONSOLE-LOG" class="ch.qos.logback.core.ConsoleAppender">
<layout class="ch.qos.logback.classic.PatternLayout">
<pattern>[%d{yyyy-MM-dd' 'HH:mm:ss.sss}] [%C] [%t] [%L] [%-5p] %m%n</pattern>
</layout>
</appender>
<!--獲取比info級別高(包括info級別)但除error級別的日志-->
<appender name="INFO-LOG" class="ch.qos.logback.core.rolling.RollingFileAppender">
<filter class="ch.qos.logback.classic.filter.LevelFilter">
<level>ERROR</level>
<onMatch>DENY</onMatch>
<onMismatch>ACCEPT</onMismatch>
</filter>
<encoder>
<pattern>[%d{yyyy-MM-dd' 'HH:mm:ss.sss}] [%C] [%t] [%L] [%-5p] %m%n</pattern>
</encoder>
<!--滾動策略-->
<rollingPolicy class="ch.qos.logback.core.rolling.TimeBasedRollingPolicy">
<!--路徑-->
<fileNamePattern>${LOG_INFO_HOME}//%d.log</fileNamePattern>
<maxHistory>30</maxHistory>
</rollingPolicy>
</appender>
<appender name="ERROR-LOG" class="ch.qos.logback.core.rolling.RollingFileAppender">
<filter class="ch.qos.logback.classic.filter.ThresholdFilter">
<level>ERROR</level>
</filter>
<encoder>
<pattern>[%d{yyyy-MM-dd' 'HH:mm:ss.sss}] [%C] [%t] [%L] [%-5p] %m%n</pattern>
</encoder>
<!--滾動策略-->
<rollingPolicy class="ch.qos.logback.core.rolling.TimeBasedRollingPolicy">
<!--路徑-->
<fileNamePattern>${LOG_ERROR_HOME}//%d.log</fileNamePattern>
<maxHistory>30</maxHistory>
</rollingPolicy>
</appender>
<root level="info">
<appender-ref ref="CONSOLE-LOG" />
<appender-ref ref="INFO-LOG" />
<appender-ref ref="ERROR-LOG" />
</root>
</configuration>
部分標(biāo)簽說明
- <root>標(biāo)簽，必填標(biāo)簽，用來指定最基礎(chǔ)的日志輸出級別
- <appender-ref>標(biāo)簽，添加append
- <append>標(biāo)簽，通過使用該標(biāo)簽指定日志的收集策略
- name屬性指定appender命名
- class屬性指定輸出策略，通常有兩種，控制臺輸出和文件輸出，文件輸出就是將日志進(jìn)行一個持久化。ConsoleAppender將日志輸出到控制臺
- <filter>標(biāo)簽，通過使用該標(biāo)簽指定過濾策略
- <level>標(biāo)簽指定過濾的類型
- <encoder>標(biāo)簽，使用該標(biāo)簽下的<pattern>標(biāo)簽指定日志輸出格式
- <rollingPolicy>標(biāo)簽指定收集策略，比如基于時間進(jìn)行收集
- <fileNamePattern>標(biāo)簽指定生成日志保存地址 通過這樣配置已經(jīng)實現(xiàn)了分類分天手機(jī)日志的目標(biāo)了
logback 高級特性異步輸出日志
之前的日志配置方式是基于同步的，每次日志輸出到文件都會進(jìn)行一次磁盤IO。采用異步寫日志的方式而不讓此次寫日志發(fā)生磁盤IO，阻塞線程從而造成不必要的性能損耗。異步輸出日志的方式很簡單，添加一個基于異步寫日志的appender，并指向原先配置的appender即可
<!-- 異步輸出 -->
<appender name="ASYNC-INFO" class="ch.qos.logback.classic.AsyncAppender">
<!-- 不丟失日志.默認(rèn)的,如果隊列的80%已滿,則會丟棄TRACT、DEBUG、INFO級別的日志 -->
<discardingThreshold>0</discardingThreshold>
<!-- 更改默認(rèn)的隊列的深度,該值會影響性能.默認(rèn)值為256 -->
<queueSize>256</queueSize>
<!-- 添加附加的appender,最多只能添加一個 -->
<appender-ref ref="INFO-LOG"/>
</appender>
<appender name="ASYNC-ERROR" class="ch.qos.logback.classic.AsyncAppender">
<!-- 不丟失日志.默認(rèn)的,如果隊列的80%已滿,則會丟棄TRACT、DEBUG、INFO級別的日志 -->
<discardingThreshold>0</discardingThreshold>
<!-- 更改默認(rèn)的隊列的深度,該值會影響性能.默認(rèn)值為256 -->
<queueSize>256</queueSize>
<!-- 添加附加的appender,最多只能添加一個 -->
<appender-ref ref="ERROR-LOG"/>
</appender>
異步輸出日志性能測試
既然能提高性能的話，必須進(jìn)行一次測試比對，同步和異步輸出日志性能到底能提升多少倍？
服務(wù)器硬件
CPU六核- 內(nèi)存 8G
測試工具
Apache Jmeter
同步輸出日志
線程數(shù)：100
Ramp-Up Loop(可以理解為啟動線程所用時間) ：0 可以理解為100個線程同時啟用
測試結(jié)果
重點關(guān)注指標(biāo)Throughput【TPS】吞吐量：系統(tǒng)在單位時間內(nèi)處理請求的數(shù)量，在同步輸出日志中TPS為44.2/sec
異步輸出日志
- 線程數(shù) 100
Ramp-Up Loop：0- 測試結(jié)果
TPS為497.5/sec，性能提升了10多倍?。?！
異步日志輸出原理
從logback框架下的Logger.info方法開始追蹤。一路的方法調(diào)用路徑如下圖所示：
異步輸出日志中最關(guān)鍵的就是配置文件中ch.qos.logback.classic``AsyncAppenderBase``append
protected void append(E eventObject) {
if(!this.isQueueBelowDiscardingThreshold() || !this.isDiscardable(eventObject)) {
this.preprocess(eventObject);
this.put(eventObject);
}
}
通過隊列情況判斷是否需要丟棄日志，不丟棄的話將它放到阻塞隊列中，通過查看代碼，這個阻塞隊列為ArrayBlockingQueueu，默認(rèn)大小為256，可以通過配置文件進(jìn)行修改。Logger.info(...)到append(...)就結(jié)束了，只做了將日志塞入到阻塞隊列的事，然后繼續(xù)執(zhí)行Logger.info(...)下面的語句了。 在AsyncAppenderBase類中定義了一個Worker線程，run方法中的關(guān)鍵部分代碼如下:
E e = parent.blockingQueue.take(); aai.appendLoopOnAppenders(e);
從阻塞隊列中取出一個日志，并調(diào)用AppenderAttachableImpl類中的appendLoopOnAppenders方法維護(hù)一個Append列表。Worker線程中調(diào)用方法過程主要如下圖：
最主要的兩個方法就是encode和write方法，前一個法方會根據(jù)配置文件中encode指定的方式轉(zhuǎn)化為字節(jié)碼，后一個方法將轉(zhuǎn)化成的字節(jié)碼寫入到文件中去。所以寫文件是通過新起一個線程去完成的，主線程將日志扔到阻塞隊列中，然后又去做其他事情了。
最后附：項目完整代碼
到此這篇關(guān)于Logback配置文件這么寫(TPS提高10倍)的文章就介紹到這了,更多相關(guān)Logback配置文件內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家！
相關(guān)文章
這篇文章主要為大家詳細(xì)介紹了Java學(xué)習(xí)筆記之異常處理，具有一定的參考價值，感興趣的小伙伴們可以參考一下2018-10-10
Java正則表達(dá)式實現(xiàn)在文本中匹配查找換行符的方法【經(jīng)典實例】
這篇文章主要介紹了Java正則表達(dá)式實現(xiàn)在文本中匹配查找換行符的方法,結(jié)合具體實例分析了java正則匹配查找換行符的實現(xiàn)技巧與匹配模式相關(guān)操作注意事項,需要的朋友可以參考下2017-04-04
這篇文章主要介紹了詳解如何使用maven生成可以執(zhí)行的jar，小編覺得挺不錯的，現(xiàn)在分享給大家，也給大家做個參考。一起跟隨小編過來看看吧2018-06-06
java使用lambda表達(dá)式對List集合進(jìn)行操作技巧(JDK1.8)
這篇文章主要介紹了java使用lambda表達(dá)式對List集合進(jìn)行操作技巧適用jdk1.8，感興趣的朋友跟著小編一起看看實現(xiàn)代碼吧2018-06-06
這篇文章主要介紹了java方法重寫(重點講),方法重載問題,具有很好的參考價值,希望對大家有所幫助,如有錯誤或未考慮完全的地方,望不吝賜教2024-05-05
Idea導(dǎo)入eureka源碼實現(xiàn)過程解析
這篇文章主要介紹了Idea導(dǎo)入eureka源碼實現(xiàn)過程解析,文中通過示例代碼介紹的非常詳細(xì)，對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友可以參考下2020-08-08
Java通過httpclient比較重定向和請求轉(zhuǎn)發(fā)
這篇文章主要介紹了Java通過httpclient比較重定向和請求轉(zhuǎn)發(fā),HttpClient?4.x?版本，get請求方法會自動進(jìn)行重定向，而post請求方法不會自動進(jìn)行重定向,需要的朋友可以參考下2023-04-04
分布式開發(fā)醫(yī)療掛號系統(tǒng)數(shù)據(jù)字典模塊前后端實現(xiàn)
這篇文章主要為大家介紹了分布式開發(fā)醫(yī)療掛號系統(tǒng)數(shù)據(jù)字典模塊前后端實現(xiàn)，有需要的朋友可以借鑒參考下，希望能夠有所幫助，祝大家多多進(jìn)步，早日升職加薪2022-04-04
這篇文章主要介紹了淺談Java中的分布式鎖,為了保證一個方法或?qū)傩栽诟卟l(fā)情況下的同一時間只能被同一個線程執(zhí)行,在傳統(tǒng)單體應(yīng)用單機(jī)部署的情況下,可以使用Java并發(fā)處理相關(guān)的API(如ReentrantLock或Synchronized)進(jìn)行互斥控制,需要的朋友可以參考下2023-09-09
Java使用POI導(dǎo)出Excel(一)：單sheet
這篇文章介紹了Java使用POI導(dǎo)出Excel的方法，文中通過示例代碼介紹的非常詳細(xì)。對大家的學(xué)習(xí)或工作具有一定的參考借鑒價值，需要的朋友可以參考下2022-10-10