java 多线程 异步日志_精彩技巧(1)-- 异步打印日志的一点事
一、前言
最近剛剛結(jié)束轉(zhuǎn)崗以來的第一次雙11壓測,收獲頗多,難言言表, 本文就先談?wù)劗惒饺罩景?#xff0c;在高并發(fā)高流量響應(yīng)延遲要求比較小的系統(tǒng)中同步打日志已經(jīng)滿足不了需求了,同步打日志會阻塞調(diào)用打日志的線程,而打日志本身是需要寫磁盤的,所以會造成rt增加。異步日志就是為了解決這個問題。
二、日志打印模型
同步日志模型
如上圖,多個業(yè)務(wù)線程打印日志時候要等把內(nèi)容寫入磁盤后才會返回,所以打日志的rt就是寫入磁盤的耗時。
異步日志模型
如上圖多個業(yè)務(wù)線程打印日志時候是把打印任務(wù)放入內(nèi)存隊列后就直接返回了,而具體打印日志是有日志系統(tǒng)的一個日志線程去隊列里面獲取然后執(zhí)行,可見這種打印rt就是寫入內(nèi)存隊列的耗時。
三、關(guān)于異步日志的一些事
異步日志設(shè)置
對于logback來說異步日志里面的隊列是一個有界ArrayBlockingQueue,其中queueSize是隊列大小,taskLogAppender是引用的普通同步日志
discardingThreshold是一個閾值,通過下面代碼看他的作用:
當(dāng)隊列的剩余容量小于這個閾值并且當(dāng)前日志level TRACE, DEBUG or INFO ,則丟棄這些日志。
在壓測時候代碼配置如上,也就是配置了異步日志,但是還是出現(xiàn)了線程阻塞在打日志的地方了,經(jīng)查看是阻塞到了日志隊列ArrayBlockingQueue的put方法:
可知put方法在隊列滿時候會掛起當(dāng)前線程。那么如何解那?
上面介紹了discardingThreshold,可知本文設(shè)置為0說明永遠不會丟棄日志level TRACE, DEBUG or INFO的日志,只要discardingThreshold>0則當(dāng)隊列快滿時候level TRACE, DEBUG or INFO的日志就會丟棄掉,這個貌似可以解決問題。但是如果打印的是warn級別的日志那?還是會在put的時候阻塞。
通過看代碼發(fā)現(xiàn)最終寫日志時候有個判斷:
如果設(shè)置了neverBlock=true則寫日志隊列時候會調(diào)用ArrayBlockingQueue對的offer方法而不是put,而offer是非阻塞的:
可知如果隊列滿則直接返回,而不是被掛起當(dāng)前線程。 所以配置異步appender時候如下:
四 、總結(jié)
在高并發(fā)低延遲要求的系統(tǒng)里面不重要的日志可以設(shè)置為異步并且要注意設(shè)置隊列滿則丟棄策略,防止業(yè)務(wù)線程被掛起從而影響rt。
總結(jié)
以上是生活随笔為你收集整理的java 多线程 异步日志_精彩技巧(1)-- 异步打印日志的一点事的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: java 常量折叠_V8 使用“常量折叠
- 下一篇: java int == integer_