nxlog 中文亂碼解決

本篇文章主要介紹使用nxlog作為日志推送工具時，遇到的中文亂碼問題

背景

項目基于springboot開發，使用log4j日志插件，用tomcat作為運行容器，運行在windows環境下。日志都輸出到tomcat的\apache-tomcat-8.0.53\logs\catalina.out文件中。因為想在linux環境下的graylog應用中也能收到Windows環境下項目產生的日志，所以使用nxlog作為日志推送工具，但是推送到graylog端的日志中包含的中文都是亂碼，如下圖所示：

原有nxlog配置

nxlog配置文件路徑：C:\Program Files (x86)\nxlog\conf\nxlog.conf

## 主要配置項<Extension _syslog>Module xm_syslog </Extension><Input testfile>Module im_fileFile "D:\apache-tomcat-8.0.53\logs\catalina.*.out" SavePos TRUE </Input><Output out>Module om_tcpHost 192.168.1.101Port 514 </Output><Route 1>Path testfile => out </Route>

原因分析

通過查找網上資料，綜合其他人遇到的情況判斷，應該是由于項目默認編碼為UTF-8，但是window系統默認編碼為GBK，編碼不一致導致輸出的日志文件沒有以正確的編碼讀取導致發送給graylog的數據亂碼。

解決

通過在配置文件中引入nxlog的xm_charconv（字符集轉換）模塊，在讀取日志文件的時候，自動將其他的編碼類型轉換為utf-8編碼來解決亂碼問題。

更新后的nxlog配置文件

## 主要配置項<Extension _syslog>Module xm_syslog </Extension><Extension xm_charconv>Module xm_charconvAutodetectCharsets gbk, utf-8, euc-jp, utf-16, utf-32, iso8859-2 </Extension><Input testfile>Module im_fileFile "D:\apache-tomcat-8.0.53\logs\catalina.*.out" Exec convert_fields("AUTO", "utf-8");SavePos TRUE </Input><Output out>Module om_tcpHost 192.168.1.101Port 514 </Output><Route 1>Path testfile => out </Route>

結果

修改完配置文件后，重啟nxlog服務，即可看到新發送的沒有亂碼的日志了：

參考

[bug報告]nxlog字符集轉化導致內存泄漏
Nxlog配置
字符集轉換（xm_charconv）
nxlog | Logstash 最佳實踐

總結

以上是生活随笔為你收集整理的nxlog 中文乱码解决的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。