javascript
Spring Boot中使用log4j实现http请求日志入mongodb
之前在《使用AOP統一處理Web請求日志》一文中介紹了如何使用AOP統一記錄web請求日志。基本思路是通過aop去切web層的controller實現,獲取每個http的內容并通過log4j將日志內容寫到應用服務器的文件系統中。
但是當我們在集群中部署應用之后,應用請求的日志被分散記錄在了不同應用服務器的文件系統上,這樣分散的存儲并不利于我們對日志內容的檢索。解決日志分散問題的方案多種多樣,本文思路以在《使用AOP統一處理Web請求日志》一文的基礎之上,擴展log4j實現將日志寫入MongoDB。
準備工作
可以先拿Chapter4-2-4工程為基礎,進行后續的實驗改造。該工程實現了一個簡單的REST接口,一個對web層的切面,并在web層切面前后記錄http請求的日志內容。
通過自定義appender實現
思路:log4j提供的輸出器實現自Appender接口,要自定義appender輸出到MongoDB,只需要繼承AppenderSkeleton類,并實現幾個方法即可完成。
引入mongodb的驅動
在pom.xml中引入下面依賴
| <dependency> <groupId>org.mongodb</groupId> <artifactId>mongodb-driver</artifactId> <version>3.2.2</version> </dependency> |
實現MongoAppender
編寫MongoAppender類繼承AppenderSkeleton,實現如下:
| public class MongoAppender extends AppenderSkeleton { private MongoClient mongoClient; private MongoDatabase mongoDatabase; private MongoCollection<BasicDBObject> logsCollection; private String connectionUrl; private String databaseName; private String collectionName; protected void append(LoggingEvent loggingEvent) { if(mongoDatabase == null) { MongoClientURI connectionString = new MongoClientURI(connectionUrl); mongoClient = new MongoClient(connectionString); mongoDatabase = mongoClient.getDatabase(databaseName); logsCollection = mongoDatabase.getCollection(collectionName, BasicDBObject.class); } logsCollection.insertOne((BasicDBObject) loggingEvent.getMessage()); } public void close() { if(mongoClient != null) { mongoClient.close(); } } public boolean requiresLayout() { return false; } // 省略getter和setter } |
定義MongoDB的配置參數,可通過log4j.properties配置:
- connectionUrl:連接mongodb的串
- databaseName:數據庫名
- collectionName:集合名
定義MongoDB的連接和操作對象,根據log4j.properties配置的參數初始化:
- mongoClient:mongodb的連接客戶端
- mongoDatabase:記錄日志的數據庫
- logsCollection:記錄日志的集合
重寫append函數:
- 根據log4j.properties中的配置創建mongodb連接
- LoggingEvent提供getMessage()函數來獲取日志消息
- 往配置的記錄日志的collection中插入日志消息
重寫close函數:關閉mongodb的
配置log4j.properties
設置名為mongodb的logger:
- 記錄INFO級別日志
- appender實現為com.didispace.log.MongoAppende
- mongodb連接地址:mongodb://localhost:27017
- mongodb數據庫名:logs
- mongodb集合名:logs_request
| log4j.logger.mongodb=INFO, mongodb # mongodb輸出 log4j.appender.mongodb=com.didispace.log.MongoAppender log4j.appender.mongodb.connectionUrl=mongodb://localhost:27017 log4j.appender.mongodb.databaseName=logs log4j.appender.mongodb.collectionName=logs_request |
切面中使用mongodb logger
修改后的代碼如下,主要做了以下幾點修改:
- logger取名為mongodb的
- 通過getBasicDBObject函數從HttpServletRequest和JoinPoint對象中獲取請求信息,并組裝成BasicDBObject
- getHeadersInfo函數從HttpServletRequest中獲取header信息
- 通過logger.info(),輸出BasicDBObject對象的信息到mongodb
(1) public class WebLogAspect { private Logger logger = Logger.getLogger("mongodb"); ("execution(public * com.didispace.web..*.*(..))") public void webLog(){} ("webLog()") public void doBefore(JoinPoint joinPoint) throws Throwable { // 獲取HttpServletRequest ServletRequestAttributes attributes = (ServletRequestAttributes) RequestContextHolder.getRequestAttributes(); HttpServletRequest request = attributes.getRequest(); // 獲取要記錄的日志內容 BasicDBObject logInfo = getBasicDBObject(request, joinPoint); logger.info(logInfo); } private BasicDBObject getBasicDBObject(HttpServletRequest request, JoinPoint joinPoint) { // 基本信息 BasicDBObject r = new BasicDBObject(); r.append("requestURL", request.getRequestURL().toString()); r.append("requestURI", request.getRequestURI()); r.append("queryString", request.getQueryString()); r.append("remoteAddr", request.getRemoteAddr()); r.append("remoteHost", request.getRemoteHost()); r.append("remotePort", request.getRemotePort()); r.append("localAddr", request.getLocalAddr()); r.append("localName", request.getLocalName()); r.append("method", request.getMethod()); r.append("headers", getHeadersInfo(request)); r.append("parameters", request.getParameterMap()); r.append("classMethod", joinPoint.getSignature().getDeclaringTypeName() + "." + joinPoint.getSignature().getName()); r.append("args", Arrays.toString(joinPoint.getArgs())); return r; } private Map<String, String> getHeadersInfo(HttpServletRequest request) { Map<String, String> map = new HashMap<>(); Enumeration headerNames = request.getHeaderNames(); while (headerNames.hasMoreElements()) { String key = (String) headerNames.nextElement(); String value = request.getHeader(key); map.put(key, value); } return map; } } |
代碼示例
本文的相關例子可以查看下面倉庫中的chapter4-2-5目錄:
- Github:https://github.com/dyc87112/SpringBoot-Learning
- Gitee:https://gitee.com/didispace/SpringBoot-Learning
如果您覺得本文不錯,歡迎Star支持,您的關注是我堅持的動力!
其他補充
上述內容主要提供一個思路去實現自定義日志的輸出和管理。我們可以通過jdbc實現日志記錄到mongodb,也可以通過spring-data-mongo來記錄到mongodb,當然我們也可以輸出到其他數據庫,或者輸出到消息隊列等待其他后續處理等。
對于日志記錄到mongodb,也可以直接使用log4mongo實現更為方便快捷。
總結
以上是生活随笔為你收集整理的Spring Boot中使用log4j实现http请求日志入mongodb的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 基于Wi-Fi的室内定位在美团总部的实践
- 下一篇: 2018最新Java面试78题:数据结构