線上服務(wù)平均響應(yīng)時(shí)間太長(zhǎng)，怎么排查？

https://xie.infoq.cn/article/914b5c56000a3880016abd8d6

前言：

最近線上環(huán)境某個(gè)接口服務(wù)響應(yīng)時(shí)間偏長(zhǎng)，導(dǎo)致用戶體驗(yàn)超差，那平時(shí)該怎么快速的排查這類問(wèn)題呢？①、為代碼添加上詳細(xì)的打印日志；不建議 ，一是線上環(huán)境，沒(méi)法隨便的重新部署更換了詳細(xì)日志的代碼，二是 添加詳細(xì)的日志輸出，那就意味這會(huì)生成大量的日志文件，這些日志文件會(huì)占據(jù)大量服務(wù)器磁盤空間。②、搭建一個(gè)模擬了線上環(huán)境的測(cè)試環(huán)境進(jìn)行復(fù)盤排查；額，出現(xiàn)了這種問(wèn)題哪有那么多的時(shí)間讓你進(jìn)行環(huán)境復(fù)盤排查，所以此方案也是 不建議的 。③、線上診斷神器 Arthas ，這個(gè)工具是阿里開(kāi)源的，專門用于線上環(huán)境問(wèn)題排查的，這個(gè)工具提供了很多 的 命令 用來(lái)排查問(wèn)題；當(dāng)出現(xiàn)上面的響應(yīng)時(shí)間偏長(zhǎng)的問(wèn)題，就可以使用 Arthas 提供的 trace 命令進(jìn)行排查，使用這個(gè)工具的 trace 命令可以統(tǒng)計(jì)到方法中整個(gè)調(diào)用鏈路上的所有性能開(kāi)銷和追蹤調(diào)用鏈路，查找其中耗時(shí)比較長(zhǎng)的方法再具體排查即可。

文章接下來(lái)將從兩方面展開(kāi)：①、搭建模擬線上服務(wù)接口響應(yīng)時(shí)間偏長(zhǎng)的環(huán)境；SpringBoot 服務(wù)接口 + JMeter 模擬服務(wù)接口調(diào)用；②、使用診斷神器 Arthas 提供的命令 trace 命令進(jìn)行響應(yīng)時(shí)間偏長(zhǎng)的問(wèn)題排查；模擬線上環(huán)境：1、SpringBoot 項(xiàng)目搭建，并且編寫好服務(wù)接口；

注意：服務(wù)接口代碼為了簡(jiǎn)便，只寫了 一些大循環(huán)的代碼 來(lái)模擬較長(zhǎng)的耗時(shí)；除此之外，實(shí)際上還包含很多多其它常見(jiàn)的情況，例如：①、服務(wù)接口方法中存在很多的 JDBC 操作 ，并且由于數(shù)據(jù)庫(kù)中數(shù)據(jù)量太大，導(dǎo)致很多的 JDBC 查詢非常耗時(shí)，并且此時(shí)可能由于還沒(méi)有創(chuàng)建合適的索引，導(dǎo)致查詢耗時(shí)更加的長(zhǎng)，最終導(dǎo)致服務(wù)接口響應(yīng)時(shí)間偏長(zhǎng)；②、此服務(wù)接口中調(diào)用了 其它的服務(wù)接口 ，由于內(nèi)部調(diào)用的其它服務(wù)接口出現(xiàn)問(wèn)題等，導(dǎo)致此其它服務(wù)接口執(zhí)行耗時(shí)比較長(zhǎng)，進(jìn)而導(dǎo)致服務(wù)接口響應(yīng)時(shí)間偏長(zhǎng)；

服務(wù)接口代碼如下：



test1、test2方法如下：



2、JMeter 模擬用戶調(diào)用的測(cè)試腳本配置：



3、服務(wù)接口 SpringBoot 代碼 和 JMeter 測(cè)試腳本的所在項(xiàng)目位置：



服務(wù)接口代碼準(zhǔn)備好后，使用IDEA開(kāi)發(fā)工具將其導(dǎo)出為 Jar 包 。?

為了模擬最為真實(shí)的線上環(huán)境，需將準(zhǔn)備好的 服務(wù)接口 Jar 包放到 服務(wù)器中，然后使用命令 java -jar *.jar 運(yùn)行起 Jar 包；然后使用 JMeter 進(jìn)行接口的調(diào)用，在 聚合報(bào)告 中發(fā)現(xiàn)平均響應(yīng)時(shí)間偏長(zhǎng)；如圖：



如果有用戶反映某功能響應(yīng)時(shí)間太長(zhǎng)了，別著急，根據(jù)下面的方法進(jìn)行排查，絕對(duì)方便又快速的找到問(wèn)題原因。Arthas 問(wèn)題排查：1、首先需要下載阿里開(kāi)源的Arthas 的診斷工具 Jar 包，下載地址：arthas-boot.jar ；然后將 Jar 包放到 部署服務(wù)接口項(xiàng)目的服務(wù)器中 。2、然后使用 ps 命令，查詢出當(dāng)前運(yùn)行服務(wù)接口的程序進(jìn)程號(hào)；例如：本文章模擬的服務(wù)接口程序 Jar 包名稱為 springboot_arthas-1.0.0.jar ，所以命令為：ps -ef | grep springboot_arthas-1.0.0 。3、然后運(yùn)行Arthas 診斷工具，命令：java -jar arthas-boot.jar ；開(kāi)始運(yùn)行的界面如圖：



此時(shí)診斷工具還沒(méi)有運(yùn)行完，需要手動(dòng)選擇要診斷/監(jiān)控的java 進(jìn)程，并且此工具也會(huì)列出全部的java進(jìn)程號(hào)，你只需要輸入 它們最前的序號(hào) [1] 即可；如圖：



4、運(yùn)行完后，可以使用 trace命令 監(jiān)控服務(wù)接口方法中調(diào)用的其它方法的耗時(shí)；trace 命令能主動(dòng)搜索 class-pattern／method-pattern 對(duì)應(yīng)的方法調(diào)用路徑，渲染和統(tǒng)計(jì)整個(gè)調(diào)用鏈路上的所有性能開(kāi)銷和追蹤調(diào)用鏈路。具體命令格式：trace [全限定類名][類中的方法名] 例如：監(jiān)控本服務(wù)接口；com.lyl.controller.TestController : 全限定類名，process：TestController 類中的方法；具體命令：trace com.lyl.controller.TestController process 5、trace 命令執(zhí)行結(jié)果展示，如圖：



通過(guò)trace 命令監(jiān)控統(tǒng)計(jì)的調(diào)用鏈路各個(gè)方法的執(zhí)行耗時(shí)，可以發(fā)現(xiàn)調(diào)用的 com.lyl.util.StringUtil 類中的 test2() 方法執(zhí)行耗時(shí)比較大；所以需要特別去查看這個(gè)方法的代碼是否存在問(wèn)題；如果這個(gè)代碼中還存在許多的方法調(diào)用鏈路，則需要再次使用 trace 命令進(jìn)行監(jiān)控調(diào)用鏈路的耗時(shí)，找出具體可能存在問(wèn)題的方法。

Arthas 阿里開(kāi)源的診斷工具還提供了很多的命令供使用，大家可以去查看學(xué)習(xí)，地址：命令列表 。

注意：①、使用Arthas 診斷的程序代碼，在打包時(shí) 不能混淆 ，否則在使用trace 命令會(huì)報(bào) 類或方法找不到 ；②、在使用trace命令監(jiān)控統(tǒng)計(jì)時(shí)，需要JMeter測(cè)試腳本正在運(yùn)行調(diào)用服務(wù)接口，如果沒(méi)有調(diào)用，則統(tǒng)計(jì)不到內(nèi)部調(diào)用鏈路的耗時(shí)情況；



能力有限，只能整理這么多，有不對(duì)的地方歡迎指出，討論

總結(jié)

以上是生活随笔為你收集整理的springboot怎么杀进程_线上服务平均响应时间太长，怎么排查？的全部?jī)?nèi)容，希望文章能夠幫你解決所遇到的問(wèn)題。

如果覺(jué)得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。