效能測試常見瓶頸分析及調優方法

在效能測試過程中，最重要的一部分就是效能瓶頸定位與調優。而引發效能瓶頸的原因是多種多樣的，在之前的部落格：常見的效能測試缺陷有進行介紹。

這篇部落格，來聊聊效能測試過程中的一些注意事項，以及常見的一些效能缺陷表現及如何進行定位分析並且調優。。。

一、注意事項

1、斷言

在壓測時，為了判斷傳送的請求是否成功，一般會通過對請求新增斷言來實現。使用斷言時，建議遵循如下規範：

①、斷言內容盡量以status/code、msg/message來判斷（當然前提是介面設計遵循restful規範）

jmeter示例：

阿里雲pts：

如果使用的是pts壓測，則斷言設定中，以code/status、msg/message等於對應的值為準；

②、盡可能不要將所有的response body內容作為斷言判斷的內容，這樣很可能會導致大量的「斷言」失敗；

ps：然後很遺憾的是，見過很多做壓測的童鞋，斷言內容以整個響應引數內容做斷言，導致大量的報錯。

2、成功率

一般在效能測試中，我們都追求99.99%的成功率，但在實際的測試過程中，為了盡可能覆蓋**邏輯，在準備階段會盡可能的準備較多的熱點資料去做到覆蓋。

這樣的話，我們所關注的成功率指標，就要分為如下兩種：

①、事務成功率

事務成功率在某些時候也可以視為請求成功率，在斷言判斷時以code/status等內容來作為請求是否成功的衡量依據；

②、業務成功率

實際的業務場景中，所謂的成功率，並不能僅根據返回的code/status來判斷。比如：乙個查詢請求，無論是返回正確的查詢結果還是由於對應資料返回空，這個請求都是成功的。

對應的響應引數可能是：  ；也可能是：  。

ps：在效能測試過程中，考慮到業務成功率和請求成功率的不同指標，結合斷言內容，需要靈活設定斷言的方式（當然，我依然建議遵循如上的2點斷言規範）！

二、常見效能瓶頸解析及調優方案

在效能測試中，導致效能出現瓶頸的原因很多，但通過直觀的監控圖表現出來的樣子，根據出現的頻次，大概有如下幾種：

效能瓶頸出現頻次

具體表現

高tps波動較大

高高併發下大量報錯

中集群類系統，各服務節點負載不均衡

中併發數不斷增加，tps上不去，cpu耗用不高

低壓測過程中tps不斷下降，cpu使用率不斷降低

下面對常見的幾種效能瓶頸原因進行解析，並說說常見的一些調優方案：

1、tps波動較大

原因解析：出現tps波動較大問題的原因一般有網路波動、其他服務資源競爭以及垃圾**問題這三種。

效能測試環境一般都是在內網或者壓測機和服務在同一網段，可通過監控網路的出入流量來排查；

其他服務資源競爭也可能造成這一問題，可以通過top命令或服務梳理方式來排查在壓測時是否有其他服務執行導致資源競爭；

垃圾**問題相對來說是最常見的導致tps波動的一種原因，可以通過gc監控命令來排查，命令如下：

1

#實時列印到螢幕
2 jstat -gc pid 300 10
3 jstat -gcutil pid 300 104#
gc資訊輸出到檔案
5 jstat -gc pid 1000 120 >>/path/gc.txt
6 jstat -gcutil pid 1000 120 >>/path/gc.txt

網路波動問題，可以讓運維同事協助解決（比如切換網段或選擇內網壓測），或者等到網路較為穩定時候進行壓測驗證；

資源競爭問題：通過命令監控和服務梳理，找出壓測時正在執行的其他服務，通過溝通協調停止該服務（或者換個沒資源競爭的服務節點重新壓測也可以）；

垃圾**問題：通過gc檔案分析，如果發現有頻繁的fgc，可以通過修改jvm的堆記憶體引數xmx，然後再次壓測驗證（xmx最大值不要超過服務節點記憶體的50%！）

2、高併發下大量報錯

原因解析：出現該類問題，常見的原因有短連線導致的埠被完全占用以及執行緒池最大執行緒數配置較小及超時時間較短導致。

調優方案：

短連線問題：修改服務節點的tcp_tw_reuse引數為1，釋放time_wait scoket用於新的連線；

執行緒池問題：修改服務節點中容器的server.xml檔案中的配置引數，主要修改如下幾個引數：

#

最大執行緒數，即服務端可以同時響應處理的最大請求數
maxthreads="
200"
#tomcat的最大連線線程數，即超過設定的閾值，tomcat會關閉不再需要的socket執行緒 
maxsparethreads="
200"
#所有可用執行緒耗盡時，可放在請求等待佇列中的請求數，超過該閾值的請求將不予處理，返回connection refused錯誤
acceptcount="
200"
#等待超時的閾值，單位為毫秒，設定為0時表示永不超時
connectiontimeout="
20000
"

調優方案：如果確認是如上原因，可通過修改slb服務（f5/ha/nginx）的會話保持引數為none，然後再次壓測驗證；

4、併發數不斷增加，tps上不去，cpu使用率較低

原因解析：出現該類問題，常見的原因有：sql沒有建立索引/sql語句篩選條件不明確、**中設有同步鎖，高併發時出現鎖等待；

調優方案：

sql問題：沒有索引就建立索引，sql語句篩選條件不明確就優化sql和業務邏輯；

同步鎖問題：是否去掉同步鎖，有時候不僅僅是技術問題，還涉及到業務邏輯的各種判斷，是否去掉同步鎖，建議和開發產品同事溝通確認；

5、壓測過程中tps不斷下降，cpu使用率不斷降低

原因解析：一般來說，出現這種問題的原因是因為執行緒block導致，當然不排除其他可能；

調優方案：如果是執行緒阻塞問題，修改執行緒策略，然後重新驗證即可；

6、其他

除了上述的五種常見效能瓶頸，還有其他，比如：connection reset、服務重啟、timeout等，當然，分析定位後，你會發現，我們常見的效能瓶頸，

導致其的原因大多都是因為引數配置、服務策略、阻塞及各種鎖導致。。。

效能瓶頸分析參考準則：從上至下、從區域性到整體！

以上分析及調優方案僅供參考，具體定位還需要根據日誌監控等手段來分析調優。。。

效能瓶頸調優

效能測試的目標是評價系統當前效能 尋找瓶頸，優化效能 系統未來的效能，可擴充套件性 效能測試瓶頸分析的關鍵步驟 步驟一 效能測試與資料收集 步驟二 效能瓶頸分析 步驟三 效能調優解決方案。步驟一 效能測試與資料收集 資料收集，需要收集那些內容呢，下面來列一下關鍵點 1 客戶端效能指標 併發使用者數 ...

測試分析及調優

在負載情況下訊息伺服器時間特性的測試伺服器的測試分析過程，在測試過程中通過分析被測物件及測試結果，設計測試方法及測試資料，找出被測物件的效能瓶頸所在，達到優化系統效能的目的。本文通過編寫效能測試分析及調優的相關流程和方法，幫助研發人員 效能測試人員或者運維人員快速地進行效能測試 瓶頸定位及調優。系統...

效能測試調優

效能測試的目的就評估當前系統效能的指標，分析定位解決效能瓶頸，預防規避效能風險。效能分析是為了確定導致效能瓶頸的原因，而調優就是用來解決效能瓶頸。通過某些手段讓系統效能得到提高，是效能調優的主要目的。效能分析主要有兩種方法 1.將測試結果與使用者需求做比較，如果達到使用者需求，則測試通過。系統滿足1...