Logback這樣配置,性能提升10倍!
往期熱門文章:
1、牛客網(wǎng):為什么不能將實(shí)數(shù)作為 HashMap 的 key? 2、RedisJson發(fā)布官方性能報告,性能碾壓ES和Mongo 3、分布式數(shù)據(jù)一致性思考-B端系統(tǒng)一致性 4、Java字符串拼接的五種方法,哪種性能最好? 5、一次線上JVM調(diào)優(yōu)實(shí)踐,F(xiàn)ullGC40次/天到10天一次的優(yōu)化過程
今天我們講一下logback的異步日志配置,希望通過本文你可以了解以下內(nèi)容:
日志輸出到文件并根據(jù)LEVEL級別將日志分類保存到不同文件
通過異步輸出日志減少磁盤IO提高性能
異步輸出日志的原理
01、配置文件logback-spring.xml
SpringBoot工程自帶 logback和 slf4j的依賴,所以重點(diǎn)放在編寫配置文件上,需要引入什么依賴,日志依賴沖突統(tǒng)統(tǒng)都不需要我們管了。logback框架會默認(rèn)加載 classpath下命名為 logback-spring或 logback的配置文件。
將所有日志都存儲在一個文件中文件大小也隨著應(yīng)用的運(yùn)行越來越大并且不好排查問題,正確的做法應(yīng)該是將 error日志和其他日志分開,并且不同級別的日志根據(jù)時間段進(jìn)行記錄存儲。
"1.0"?encoding="utf-8"?>
????"logback.properties"/>
????"CONSOLE-LOG"?class="ch.qos.logback.core.ConsoleAppender">
????????"ch.qos.logback.classic.PatternLayout">
????????????[%d{yyyy-MM-dd'?'HH:mm:ss.sss}]?[%C]?[%t]?[%L]?[%-5p]?%m%n
????????
????
????
????"INFO-LOG"?class="ch.qos.logback.core.rolling.RollingFileAppender">
????????"ch.qos.logback.classic.filter.LevelFilter">
????????????ERROR
????????????DENY
????????????ACCEPT
????????
????????
????????????[%d{yyyy-MM-dd'?'HH:mm:ss.sss}]?[%C]?[%t]?[%L]?[%-5p]?%m%n
????????
????????
????????"ch.qos.logback.core.rolling.TimeBasedRollingPolicy">
????????????
????????????${LOG_INFO_HOME}//%d.log
????????????30
????????
????
????"ERROR-LOG"?class="ch.qos.logback.core.rolling.RollingFileAppender">
????????"ch.qos.logback.classic.filter.ThresholdFilter">
????????????ERROR
????????
????????
????????????[%d{yyyy-MM-dd'?'HH:mm:ss.sss}]?[%C]?[%t]?[%L]?[%-5p]?%m%n
????????
????????
????????"ch.qos.logback.core.rolling.TimeBasedRollingPolicy">
????????????
????????????${LOG_ERROR_HOME}//%d.log
????????????30
????????
????
????"info">
????????"CONSOLE-LOG"?/>
????????"INFO-LOG"?/>
????????"ERROR-LOG"?/>
????
部分標(biāo)簽說明:
標(biāo)簽,必填標(biāo)簽,用來指定最基礎(chǔ)的日志輸出級別 標(biāo)簽,添加append 標(biāo)簽,通過使用該標(biāo)簽指定日志的收集策略,name屬性指定appender命名,class屬性指定輸出策略,通常有兩種,控制臺輸出和文件輸出,文件輸出就是將日志進(jìn)行一個持久化。ConsoleAppender將日志輸出到控制臺 標(biāo)簽,通過使用該標(biāo)簽指定過濾策略 標(biāo)簽指定過濾的類型 標(biāo)簽,使用該標(biāo)簽下的 標(biāo)簽指定日志輸出格式。 標(biāo)簽指定收集策略,比如基于時間進(jìn)行收集 標(biāo)簽指定生成日志保存地址 通過這樣配置已經(jīng)實(shí)現(xiàn)了分類分天手機(jī)日志的目標(biāo)了

02、logback 高級特性異步輸出日志
"ASYNC-INFO"?class="ch.qos.logback.classic.AsyncAppender">
????
????0
????
????256
????
????"INFO-LOG"/> "ASYNC-ERROR"?class="ch.qos.logback.classic.AsyncAppender">
????
????0
????
????256
????
????"ERROR-LOG"/>
03、異步輸出日志性能測試
既然能提高性能的話,必須進(jìn)行一次測試比對,同步和異步輸出日志性能到底能提升多少倍?
服務(wù)器硬件
CPU 六核
內(nèi)存 8G
測試工具
Apache Jmeter
同步輸出日志
線程數(shù):100
Ramp-Up Loop(可以理解為啟動線程所用時間) :0 可以理解為100個線程同時啟用
測試結(jié)果

重點(diǎn)關(guān)注指標(biāo) Throughput【TPS】 吞吐量:系統(tǒng)在單位時間內(nèi)處理請求的數(shù)量,在同步輸出日志中 TPS 為 44.2/sec
異步輸出日志
線程數(shù) 100
Ramp-Up Loop:0
測試結(jié)果

TPS 為 497.5/sec , 性能提升了10多倍!!!
異步日志輸出原理
從 logback框架下的 Logger.info方法開始追蹤。一路的方法調(diào)用路徑如下圖所示:

異步輸出日志中最關(guān)鍵的就是配置文件中 ch.qos.logback.classic.AsyncAppenderBase.append
protected?void?append(E?eventObject)?{
????????if(!this.isQueueBelowDiscardingThreshold()?||?!this.isDiscardable(eventObject))?{
????????????this.preprocess(eventObject);
????????????this.put(eventObject);
????????}
????}
通過隊列情況判斷是否需要丟棄日志,不丟棄的話將它放到阻塞隊列中,通過查看代碼,這個阻塞隊列為 ArrayBlockingQueueu,默認(rèn)大小為256,可以通過配置文件進(jìn)行修改。Logger.info(...)到 append(...)就結(jié)束了,只做了將日志塞入到阻塞隊列的事,然后繼續(xù)執(zhí)行 Logger.info(...)下面的語句了。在 AsyncAppenderBase類中定義了一個 Worker線程,run方法中的關(guān)鍵部分代碼如下:
E?e?=?parent.blockingQueue.take();
aai.appendLoopOnAppenders(e);
從阻塞隊列中取出一個日志,并調(diào)用 AppenderAttachableImpl類中的 appendLoopOnAppenders方法維護(hù)一個 Append列表。Worker線程中調(diào)用方法過程主要如下圖:

最主要的兩個方法就是 encodewriteencode
最近熱文閱讀:
1、牛客網(wǎng):為什么不能將實(shí)數(shù)作為 HashMap 的 key? 2、RedisJson發(fā)布官方性能報告,性能碾壓ES和Mongo 3、分布式數(shù)據(jù)一致性思考-B端系統(tǒng)一致性 4、Java字符串拼接的五種方法,哪種性能最好? 5、一次線上JVM調(diào)優(yōu)實(shí)踐,F(xiàn)ullGC40次/天到10天一次的優(yōu)化過程 6、Chrome 瀏覽器全球大翻車?讓 20 多億用戶無網(wǎng)可上 7、while(1) 和 for(;;)有什么區(qū)別? 8、使用MySQL,請用好 JSON 這張牌! 9、延時任務(wù)實(shí)現(xiàn)方案 10、服務(wù)端如何防止重復(fù)支付 關(guān)注公眾號,你想要的Java都在這里
