寫在前面
通過本文將了解到什么是MDC、MDC應用中存在的問題、如何解決存在的問題
基于 Spring Boot + MyBatis Plus + Vue & Element 實現的后臺管理系統 + 用戶小程序,支持 RBAC 動態權限、多租戶、數據權限、工作流、三方登錄、支付、短信、商城等功能
MDC介紹
簡介:
MDC(Mapped Diagnostic Context,映射調試上下文)是 log4j 、logback及log4j2 提供的一種方便在多線程條件下記錄日志的功能。MDC 可以看成是一個與當前線程綁定的哈希表 ,可以往其中添加鍵值對。MDC 中包含的內容可以被同一線程中執行的代碼所訪問 。
當前線程的子線程會繼承其父線程中的 MDC 的內容。當需要記錄日志時,只需要從 MDC 中獲取所需的信息即可。MDC 的內容則由程序在適當的時候保存進去。對于一個 Web 應用來說,通常是在請求被處理的最開始保存這些數據
API說明:
clear() => 移除所有MDC
get (String key) => 獲取當前線程MDC中指定key的值
getContext() => 獲取當前線程MDC的MDC
put(String key, Object o) => 往當前線程的MDC中存入指定的鍵值對
remove(String key) => 刪除當前線程MDC中指定的鍵值對
優點:
代碼簡潔,日志風格統一,不需要在log打印中手動拼寫traceId,即LOGGER.info("traceId:{} ", traceId)
暫時只能想到這一點
基于 Spring Cloud Alibaba + Gateway + Nacos + RocketMQ + Vue & Element 實現的后臺管理系統 + 用戶小程序,支持 RBAC 動態權限、多租戶、數據權限、工作流、三方登錄、支付、短信、商城等功能
MDC使用
添加攔截器
publicclassLogInterceptorimplementsHandlerInterceptor{ @Override publicbooleanpreHandle(HttpServletRequestrequest,HttpServletResponseresponse,Objecthandler)throwsException{ //如果有上層調用就用上層的ID StringtraceId=request.getHeader(Constants.TRACE_ID); if(traceId==null){ traceId=TraceIdUtil.getTraceId(); } MDC.put(Constants.TRACE_ID,traceId); returntrue; } @Override publicvoidpostHandle(HttpServletRequestrequest,HttpServletResponseresponse,Objecthandler,ModelAndViewmodelAndView) throwsException{ } @Override publicvoidafterCompletion(HttpServletRequestrequest,HttpServletResponseresponse,Objecthandler,Exceptionex) throwsException{ //調用結束后刪除 MDC.remove(Constants.TRACE_ID); } }
修改日志格式
[TRACEID:%X{traceId}]%d{HHss.SSS}%-5level%class{-1}.%M()/%L-%msg%xEx%n
重點是%X{traceId},traceId和MDC中的鍵名稱一致
簡單使用就這么容易,但是在有些情況下traceId將獲取不到
MDC 存在的問題
子線程中打印日志丟失traceId
HTTP調用丟失traceId
......丟失traceId的情況,來一個再解決一個,絕不提前優化
解決MDC存在的問題
子線程日志打印丟失traceId
子線程在打印日志的過程中traceId將丟失,解決方式為重寫線程池,對于直接new創建線程的情況不考略【實際應用中應該避免這種用法】,重寫線程池無非是對任務進行一次封裝
線程池封裝類:ThreadPoolExecutorMdcWrapper.java
publicclassThreadPoolExecutorMdcWrapperextendsThreadPoolExecutor{ publicThreadPoolExecutorMdcWrapper(intcorePoolSize,intmaximumPoolSize,longkeepAliveTime,TimeUnitunit, BlockingQueueworkQueue){ super(corePoolSize,maximumPoolSize,keepAliveTime,unit,workQueue); } publicThreadPoolExecutorMdcWrapper(intcorePoolSize,intmaximumPoolSize,longkeepAliveTime,TimeUnitunit, BlockingQueue workQueue,ThreadFactorythreadFactory){ super(corePoolSize,maximumPoolSize,keepAliveTime,unit,workQueue,threadFactory); } publicThreadPoolExecutorMdcWrapper(intcorePoolSize,intmaximumPoolSize,longkeepAliveTime,TimeUnitunit, BlockingQueue workQueue,RejectedExecutionHandlerhandler){ super(corePoolSize,maximumPoolSize,keepAliveTime,unit,workQueue,handler); } publicThreadPoolExecutorMdcWrapper(intcorePoolSize,intmaximumPoolSize,longkeepAliveTime,TimeUnitunit, BlockingQueue workQueue,ThreadFactorythreadFactory, RejectedExecutionHandlerhandler){ super(corePoolSize,maximumPoolSize,keepAliveTime,unit,workQueue,threadFactory,handler); } @Override publicvoidexecute(Runnabletask){ super.execute(ThreadMdcUtil.wrap(task,MDC.getCopyOfContextMap())); } @Override public Future submit(Runnabletask,Tresult){ returnsuper.submit(ThreadMdcUtil.wrap(task,MDC.getCopyOfContextMap()),result); } @Override public Future submit(Callable task){ returnsuper.submit(ThreadMdcUtil.wrap(task,MDC.getCopyOfContextMap())); } @Override publicFuture>submit(Runnabletask){ returnsuper.submit(ThreadMdcUtil.wrap(task,MDC.getCopyOfContextMap())); } }
說明:
繼承ThreadPoolExecutor類,重新執行任務的方法
通過ThreadMdcUtil對任務進行一次包裝
線程traceId封裝工具類:ThreadMdcUtil.java
publicclassThreadMdcUtil{ publicstaticvoidsetTraceIdIfAbsent(){ if(MDC.get(Constants.TRACE_ID)==null){ MDC.put(Constants.TRACE_ID,TraceIdUtil.getTraceId()); } } publicstaticCallable wrap(finalCallable callable,finalMap context){ return()->{ if(context==null){ MDC.clear(); }else{ MDC.setContextMap(context); } setTraceIdIfAbsent(); try{ returncallable.call(); }finally{ MDC.clear(); } }; } publicstaticRunnablewrap(finalRunnablerunnable,finalMap context){ return()->{ if(context==null){ MDC.clear(); }else{ MDC.setContextMap(context); } setTraceIdIfAbsent(); try{ runnable.run(); }finally{ MDC.clear(); } }; } }
說明【以封裝Runnable為例】:
判斷當前線程對應MDC的Map是否存在,存在則設置
設置MDC中的traceId值,不存在則新生成,針對不是子線程的情況,如果是子線程,MDC中traceId不為null
執行run方法
代碼等同于以下寫法,會更直觀
publicstaticRunnablewrap(finalRunnablerunnable,finalMapcontext){ returnnewRunnable(){ @Override publicvoidrun(){ if(context==null){ MDC.clear(); }else{ MDC.setContextMap(context); } setTraceIdIfAbsent(); try{ runnable.run(); }finally{ MDC.clear(); } } }; }
重新返回的是包裝后的Runnable,在該任務執行之前【runnable.run()】先將主線程的Map設置到當前線程中【 即MDC.setContextMap(context)】,這樣子線程和主線程MDC對應的Map就是一樣的了
判斷當前線程對應MDC的Map是否存在,存在則設置
設置MDC中的traceId值,不存在則新生成,針對不是子線程的情況,如果是子線程,MDC中traceId不為null
執行run方法
HTTP調用丟失traceId
在使用HTTP調用第三方服務接口時traceId將丟失,需要對HTTP調用工具進行改造,在發送時在request header中添加traceId,在下層被調用方添加攔截器獲取header中的traceId添加到MDC中
HTTP調用有多種方式,比較常見的有HttpClient、OKHttp、RestTemplate,所以只給出這幾種HTTP調用的解決方式
HttpClient:
實現HttpClient攔截器
publicclassHttpClientTraceIdInterceptorimplementsHttpRequestInterceptor{ @Override publicvoidprocess(HttpRequesthttpRequest,HttpContexthttpContext)throwsHttpException,IOException{ StringtraceId=MDC.get(Constants.TRACE_ID); //當前線程調用中有traceId,則將該traceId進行透傳 if(traceId!=null){ //添加請求體 httpRequest.addHeader(Constants.TRACE_ID,traceId); } } }
實現HttpRequestInterceptor接口并重寫process方法
如果調用線程中含有traceId,則需要將獲取到的traceId通過request中的header向下透傳下去
為HttpClient添加攔截器
privatestaticCloseableHttpClienthttpClient=HttpClientBuilder.create() .addInterceptorFirst(newHttpClientTraceIdInterceptor()) .build();
通過addInterceptorFirst方法為HttpClient添加攔截器
OKHttp:
實現OKHttp攔截器
publicclassOkHttpTraceIdInterceptorimplementsInterceptor{ @Override publicResponseintercept(Chainchain)throwsIOException{ StringtraceId=MDC.get(Constants.TRACE_ID); Requestrequest=null; if(traceId!=null){ //添加請求體 request=chain.request().newBuilder().addHeader(Constants.TRACE_ID,traceId).build(); } ResponseoriginResponse=chain.proceed(request); returnoriginResponse; } }
實現Interceptor攔截器,重寫interceptor方法,實現邏輯和HttpClient差不多,如果能夠獲取到當前線程的traceId則向下透傳
為OkHttp添加攔截器
privatestaticOkHttpClientclient=newOkHttpClient.Builder() .addNetworkInterceptor(newOkHttpTraceIdInterceptor()) .build();
調用addNetworkInterceptor方法添加攔截器
RestTemplate:
實現RestTemplate攔截器
publicclassRestTemplateTraceIdInterceptorimplementsClientHttpRequestInterceptor{ @Override publicClientHttpResponseintercept(HttpRequesthttpRequest,byte[]bytes,ClientHttpRequestExecutionclientHttpRequestExecution)throwsIOException{ StringtraceId=MDC.get(Constants.TRACE_ID); if(traceId!=null){ httpRequest.getHeaders().add(Constants.TRACE_ID,traceId); } returnclientHttpRequestExecution.execute(httpRequest,bytes); } }
實現ClientHttpRequestInterceptor接口,并重寫intercept方法,其余邏輯都是一樣的不重復說明
為RestTemplate添加攔截器
restTemplate.setInterceptors(Arrays.asList(newRestTemplateTraceIdInterceptor()));
調用setInterceptors方法添加攔截器
第三方服務攔截器:
HTTP調用第三方服務接口全流程traceId需要第三方服務配合,第三方服務需要添加攔截器拿到request header中的traceId并添加到MDC中
publicclassLogInterceptorimplementsHandlerInterceptor{ @Override publicbooleanpreHandle(HttpServletRequestrequest,HttpServletResponseresponse,Objecthandler)throwsException{ //如果有上層調用就用上層的ID StringtraceId=request.getHeader(Constants.TRACE_ID); if(traceId==null){ traceId=TraceIdUtils.getTraceId(); } MDC.put("traceId",traceId); returntrue; } @Override publicvoidpostHandle(HttpServletRequestrequest,HttpServletResponseresponse,Objecthandler,ModelAndViewmodelAndView) throwsException{ } @Override publicvoidafterCompletion(HttpServletRequestrequest,HttpServletResponseresponse,Objecthandler,Exceptionex) throwsException{ MDC.remove(Constants.TRACE_ID); } }
說明:
先從request header中獲取traceId
從request header中獲取不到traceId則說明不是第三方調用,直接生成一個新的traceId
將生成的traceId存入MDC中
除了需要添加攔截器之外,還需要在日志格式中添加traceId的打印,如下:
[TRACEID:%X{traceId}]%d{HHss.SSS}%-5level%class{-1}.%M()/%L-%msg%xEx%n
需要添加%X{traceId}
審核編輯:湯梓紅
-
spring
+關注
關注
0文章
338瀏覽量
14312 -
日志
+關注
關注
0文章
138瀏覽量
10633 -
Boot
+關注
關注
0文章
149瀏覽量
35787 -
線程
+關注
關注
0文章
504瀏覽量
19653 -
SpringBoot
+關注
關注
0文章
173瀏覽量
169
原文標題:SpringBoot + MDC 實現全鏈路調用日志跟蹤
文章出處:【微信號:芋道源碼,微信公眾號:芋道源碼】歡迎添加關注!文章轉載請注明出處。
發布評論請先 登錄
相關推薦
評論