Logback 配置文件這樣優(yōu)化,TPS提高 10 倍
點擊上方藍(lán)色字體,選擇“標(biāo)星公眾號”
優(yōu)質(zhì)文章,第一時間送達(dá)
01、通過閱讀本篇文章將了解到
1.日志輸出到文件并根據(jù) LEVEL級別將日志分類保存到不同文件2.通過異步輸出日志減少磁盤 IO提高性能3.異步輸出日志的原理
02、配置文件logback-spring.xml
SpringBoot工程自帶logback和slf4j的依賴,所以重點放在編寫配置文件上,需要引入什么依賴,日志依賴沖突統(tǒng)統(tǒng)都不需要我們管了。logback框架會默認(rèn)加載classpath下命名為logback-spring或logback的配置文件。將所有日志都存儲在一個文件中文件大小也隨著應(yīng)用的運行越來越大并且不好排查問題,正確的做法應(yīng)該是將error日志和其他日志分開,并且不同級別的日志根據(jù)時間段進行記錄存儲。
<configuration>
????<property?resource="logback.properties"/>
????<appender?name="CONSOLE-LOG"?class="ch.qos.logback.core.ConsoleAppender">
????????<layout?class="ch.qos.logback.classic.PatternLayout">
????????????<pattern>[%d{yyyy-MM-dd'?'HH:mm:ss.sss}]?[%C]?[%t]?[%L]?[%-5p]?%m%npattern>
????????layout>
????appender>
????
????<appender?name="INFO-LOG"?class="ch.qos.logback.core.rolling.RollingFileAppender">
????????<filter?class="ch.qos.logback.classic.filter.LevelFilter">
????????????<level>ERRORlevel>
????????????<onMatch>DENYonMatch>
????????????<onMismatch>ACCEPTonMismatch>
????????filter>
????????<encoder>
????????????<pattern>[%d{yyyy-MM-dd'?'HH:mm:ss.sss}]?[%C]?[%t]?[%L]?[%-5p]?%m%npattern>
????????encoder>
????????
????????<rollingPolicy?class="ch.qos.logback.core.rolling.TimeBasedRollingPolicy">
????????????
????????????<fileNamePattern>${LOG_INFO_HOME}//%d.logfileNamePattern>
????????????<maxHistory>30maxHistory>
????????rollingPolicy>
????appender>
????<appender?name="ERROR-LOG"?class="ch.qos.logback.core.rolling.RollingFileAppender">
????????<filter?class="ch.qos.logback.classic.filter.ThresholdFilter">
????????????<level>ERRORlevel>
????????filter>
????????<encoder>
????????????<pattern>[%d{yyyy-MM-dd'?'HH:mm:ss.sss}]?[%C]?[%t]?[%L]?[%-5p]?%m%npattern>
????????encoder>
????????
????????<rollingPolicy?class="ch.qos.logback.core.rolling.TimeBasedRollingPolicy">
????????????
????????????<fileNamePattern>${LOG_ERROR_HOME}//%d.logfileNamePattern>
????????????<maxHistory>30maxHistory>
????????rollingPolicy>
????appender>
????<root?level="info">
????????<appender-ref?ref="CONSOLE-LOG"?/>
????????<appender-ref?ref="INFO-LOG"?/>
????????<appender-ref?ref="ERROR-LOG"?/>
????root>
configuration>
部分標(biāo)簽說明
標(biāo)簽,必填標(biāo)簽,用來指定最基礎(chǔ)的日志輸出級別
標(biāo)簽,添加append
標(biāo)簽,通過使用該標(biāo)簽指定日志的收集策略
name屬性指定appender命名class屬性指定輸出策略,通常有兩種,控制臺輸出和文件輸出,文件輸出就是將日志進行一個持久化。ConsoleAppender將日志輸出到控制臺
標(biāo)簽,通過使用該標(biāo)簽指定過濾策略
標(biāo)簽指定過濾的類型
標(biāo)簽,使用該標(biāo)簽下的標(biāo)簽指定日志輸出格式。如果您正在學(xué)習(xí)Spring Boot,那么推薦一個連載多年還在繼續(xù)更新的免費教程:http://blog.didispace.com/spring-boot-learning-2x/
標(biāo)簽指定收集策略,比如基于時間進行收集
標(biāo)簽指定生成日志保存地址 通過這樣配置已經(jīng)實現(xiàn)了分類分天手機日志的目標(biāo)了

03、logback 高級特性異步輸出日志
之前的日志配置方式是基于同步的,每次日志輸出到文件都會進行一次磁盤IO。采用異步寫日志的方式而不讓此次寫日志發(fā)生磁盤IO,阻塞線程從而造成不必要的性能損耗。異步輸出日志的方式很簡單,添加一個基于異步寫日志的appender,并指向原先配置的appender即可
?
????<appender?name="ASYNC-INFO"?class="ch.qos.logback.classic.AsyncAppender">
????????
????????<discardingThreshold>0discardingThreshold>
????????
????????<queueSize>256queueSize>
????????
????????<appender-ref?ref="INFO-LOG"/>
????appender>
????<appender?name="ASYNC-ERROR"?class="ch.qos.logback.classic.AsyncAppender">
????????
????????<discardingThreshold>0discardingThreshold>
????????
????????<queueSize>256queueSize>
????????
????????<appender-ref?ref="ERROR-LOG"/>
????appender>
04、異步輸出日志性能測試
既然能提高性能的話,必須進行一次測試比對,同步和異步輸出日志性能到底能提升多少倍?
05、服務(wù)器硬件
CPU?六核內(nèi)存 8G
06、測試工具
Apache?Jmeter
07、同步輸出日志
線程數(shù):100
Ramp-Up Loop(可以理解為啟動線程所用時間) :0 可以理解為100個線程同時啟用測試結(jié)果

重點關(guān)注指標(biāo) Throughput【TPS】 吞吐量:系統(tǒng)在單位時間內(nèi)處理請求的數(shù)量,在同步輸出日志中 TPS 為 44.2/sec
08、異步輸出日志
線程數(shù) 100
Ramp-Up Loop:0測試結(jié)果

TPS 為 497.5/sec , 性能提升了10多倍!!!
09、異步日志輸出原理
從logback框架下的Logger.info方法開始追蹤。一路的方法調(diào)用路徑如下圖所示:

異步輸出日志中最關(guān)鍵的就是配置文件中ch.qos.logback.classic``AsyncAppenderBase``append
//來自阿里大佬的《LeetCode刷題答案》pdf新鮮出爐
//年末面試必備!大家可以關(guān)注公眾號TJ君,回復(fù)LeetCode領(lǐng)取。
protected?void?append(E?eventObject)?{
????????if(!this.isQueueBelowDiscardingThreshold()?||?!this.isDiscardable(eventObject))?{
????????????this.preprocess(eventObject);
????????????this.put(eventObject);
????????}
????}
通過隊列情況判斷是否需要丟棄日志,不丟棄的話將它放到阻塞隊列中,通過查看代碼,這個阻塞隊列為ArrayBlockingQueueu,默認(rèn)大小為256,可以通過配置文件進行修改。Logger.info(...)到append(...)就結(jié)束了,只做了將日志塞入到阻塞隊列的事,然后繼續(xù)執(zhí)行Logger.info(...)下面的語句了。在AsyncAppenderBase類中定義了一個Worker線程,run方法中的關(guān)鍵部分代碼如下:
E?e?=?parent.blockingQueue.take();
aai.appendLoopOnAppenders(e);
從阻塞隊列中取出一個日志,并調(diào)用AppenderAttachableImpl類中的appendLoopOnAppenders方法維護一個Append列表。Worker線程中調(diào)用方法過程主要如下圖:

最主要的兩個方法就是encode``write``encode
來源:https://juejin.cn/post/6844903909920604174

加鋒哥微信:?java1239?? 圍觀鋒哥朋友圈,每天推送Java干貨!
