前言

最近線上環(huán)境某個(gè)接口服務(wù)響應(yīng)時(shí)間偏長(zhǎng)，導(dǎo)致用戶體驗(yàn)超差，那平時(shí)該怎么快速的排查這類問題呢？

• 為代碼添加上詳細(xì)的打印日志；不建議，一是線上環(huán)境，沒法隨便的重新部署更換了詳細(xì)日志的代碼，二是 添加詳細(xì)的日志輸出，那就意味這會(huì)生成大量的日志文件，這些日志文件會(huì)占據(jù)大量服務(wù)器磁盤空間。
• 搭建一個(gè)模擬了線上環(huán)境的測(cè)試環(huán)境進(jìn)行復(fù)盤排查；額，出現(xiàn)了這種問題哪有那么多的時(shí)間讓你進(jìn)行環(huán)境復(fù)盤排查，所以此方案也是 不建議的 。
• 線上診斷神器 Arthas ，這個(gè)工具是阿里開源的，專門用于線上環(huán)境問題排查的，這個(gè)工具提供了很多的命令用來(lái)排查問題；當(dāng)出現(xiàn)上面的響應(yīng)時(shí)間偏長(zhǎng)的問題，就可以使用 Arthas 提供的trace命令進(jìn)行排查，使用這個(gè)工具的 trace 命令可以統(tǒng)計(jì)到方法中整個(gè)調(diào)用鏈路上的所有性能開銷和追蹤調(diào)用鏈路，查找其中耗時(shí)比較長(zhǎng)的方法再具體排查即可。

本文接下來(lái)將從兩方面展開：

• 搭建模擬線上服務(wù)接口響應(yīng)時(shí)間偏長(zhǎng)的環(huán)境；SpringBoot 服務(wù)接口 +  JMeter 模擬服務(wù)接口調(diào)用；
• 使用診斷神器 Arthas 提供的命令 trace 命令進(jìn)行響應(yīng)時(shí)間偏長(zhǎng)的問題排查；

下面我們先模擬線上環(huán)境：利用 SpringBoot 項(xiàng)目搭建，并且編寫好服務(wù)接口；

注意：服務(wù)接口代碼為了簡(jiǎn)便，只寫了 一些大循環(huán)的代碼 來(lái)模擬較長(zhǎng)的耗時(shí)；除此之外，實(shí)際上還包含很多多其它常見的情況，例如：

• 服務(wù)接口方法中存在很多的  JDBC 操作 ，并且由于數(shù)據(jù)庫(kù)中數(shù)據(jù)量太大，導(dǎo)致很多的 JDBC 查詢非常耗時(shí)，并且此時(shí)可能由于還沒有創(chuàng)建合適的索引，導(dǎo)致查詢耗時(shí)更加的長(zhǎng)，最終導(dǎo)致服務(wù)接口響應(yīng)時(shí)間偏長(zhǎng)；
• 此服務(wù)接口中調(diào)用了 其它的服務(wù)接口 ，由于內(nèi)部調(diào)用的其它服務(wù)接口出現(xiàn)問題等，導(dǎo)致此其它服務(wù)接口執(zhí)行耗時(shí)比較長(zhǎng)，進(jìn)而導(dǎo)致服務(wù)接口響應(yīng)時(shí)間偏長(zhǎng)；

服務(wù)接口代碼如下：

 

test1、test2方法如下：

 

第二步 JMeter 模擬用戶調(diào)用的測(cè)試腳本配置：

 

第三步服務(wù)接口 SpringBoot 代碼 和 JMeter 測(cè)試腳本的所在項(xiàng)目位置：

 

服務(wù)接口代碼準(zhǔn)備好后，使用IDEA開發(fā)工具等方式將其導(dǎo)出為 Jar 包 。

為了模擬最為真實(shí)的線上環(huán)境，需將準(zhǔn)備好的 服務(wù)接口 Jar 包放到 服務(wù)器中，然后使用命令 java -jar *.jar 運(yùn)行起 Jar 包；然后使用 JMeter 進(jìn)行接口的調(diào)用，在 聚合報(bào)告 中發(fā)現(xiàn)平均響應(yīng)時(shí)間偏長(zhǎng)；如圖：

 

如果有用戶反映某功能響應(yīng)時(shí)間太長(zhǎng)了，別著急，根據(jù)下面的方法進(jìn)行排查，絕對(duì)方便又快速的找到問題原因。

Arthas 問題排查：

• 首先需要下載阿里開源的Arthas 的診斷工具 Jar 包：arthas-boot.jar；然后將 Jar 包放到 部署服務(wù)接口項(xiàng)目的服務(wù)器中 。
• 然后使用 ps 命令，查詢出當(dāng)前運(yùn)行服務(wù)接口的程序進(jìn)程號(hào)；例如：本文章模擬的服務(wù)接口程序 Jar 包名稱為 springboot_arthas-1.0.0.jar ，所以命令為：ps -ef | grep springboot_arthas-1.0.0  。
• 然后運(yùn)行Arthas 診斷工具，命令：java  -jar  arthas-boot.jar ；開始運(yùn)行的界面如圖：

 

此時(shí)診斷工具還沒有運(yùn)行完，需要手動(dòng)選擇要診斷/監(jiān)控的java 進(jìn)程，并且此工具也會(huì)列出全部的java進(jìn)程號(hào)，你只需要輸入 它們最前的序號(hào) [1] 即可；如圖：

 

運(yùn)行完后，可以使用 trace命令 監(jiān)控服務(wù)接口方法中調(diào)用的其它方法的耗時(shí)；

trace 命令能主動(dòng)搜索 class-pattern／method-pattern 對(duì)應(yīng)的方法調(diào)用路徑，渲染和統(tǒng)計(jì)整個(gè)調(diào)用鏈路上的所有性能開銷和追蹤調(diào)用鏈路。

具體命令格式：trace [全限定類名][類中的方法名]

例如：監(jiān)控本服務(wù)接口；com.lyl.controller.TestController : 全限定類名，process：TestController 類中的方法；

具體命令舉例如下所示：

trace com.lyl.controller.TestController process

trace 命令執(zhí)行結(jié)果展示，如圖：

 

?  

通過trace 命令監(jiān)控統(tǒng)計(jì)的調(diào)用鏈路各個(gè)方法的執(zhí)行耗時(shí)，可以發(fā)現(xiàn)調(diào)用的 com.lyl.util.StringUtil 類中的 test2() 方法執(zhí)行耗時(shí)比較大；所以需要特別去查看這個(gè)方法的代碼是否存在問題；如果這個(gè)代碼中還存在許多的方法調(diào)用鏈路，則需要再次使用 trace 命令進(jìn)行監(jiān)控調(diào)用鏈路的耗時(shí)，找出具體可能存在問題的方法。

?  

Arthas 阿里開源的診斷工具還提供了很多的命令供使用，大家可以去查看學(xué)習(xí)。B站搜“業(yè)余草”也可以查看到我之前錄制的視頻教程。

另外這里有兩個(gè)需要注意的地方：

• 使用Arthas 診斷的程序代碼，在打包時(shí) 不能混淆 ，否則在使用trace 命令會(huì)報(bào) 類或方法找不到；
• 在使用trace命令監(jiān)控統(tǒng)計(jì)時(shí)，需要JMeter測(cè)試腳本正在運(yùn)行調(diào)用服務(wù)接口，如果沒有調(diào)用，則統(tǒng)計(jì)不到內(nèi)部調(diào)用鏈路的耗時(shí)情況；