如何解讀性能測試監(jiān)控結(jié)果

下方查看歷史精選文章

我們將通過下面幾個方面來解讀我們的性能測試監(jiān)控結(jié)果。

1. 性能測試過程分析

2. 性能測試輸出結(jié)果分析

3. 瓶頸根源分析

4.?性能測試分析檢查表

性能測試過程分析

在這個過程中，我們主要分析兩個部分：性能測試執(zhí)行階段的實時分析和測試結(jié)束后的時候分析。

在性能測試執(zhí)行階段的實時分析，我們主要借助KPI監(jiān)控工具，筆者推薦你使用zabbix構(gòu)建基礎(chǔ)指標(biāo)的監(jiān)控，在過程中實時查看基本指標(biāo)的數(shù)據(jù)，如果發(fā)現(xiàn)數(shù)據(jù)波動異常，則用yourkit java profiler掛上去，深入分析各指標(biāo)，通過使用這兩個工具的能力，我們能深入的分析其中的問題，并結(jié)合與開發(fā)、運維的進(jìn)一步深入溝通交流，以定位、分析、診斷問題所在，從而為調(diào)優(yōu)確定相應(yīng)的方案。

不管怎么樣，我們都期望能夠監(jiān)控、分析以下指標(biāo)：

1. 以圖形或表格的方式展示性能測試中每個用例的響應(yīng)時間

2.?監(jiān)控每個腳本的的虛擬用戶的增長以及整個測試過程所用到的虛擬用戶數(shù)

3.?監(jiān)控施壓機的狀態(tài)，以免因施壓機過載出現(xiàn)不必要的誤會

4.?監(jiān)控服務(wù)的CPU\IO\MEM\網(wǎng)絡(luò)吞吐等指標(biāo)

5.?了解整個性能測試執(zhí)行過程中的所有錯誤，包括但不限于請求失敗、錯誤等等

測結(jié)束后的事后分析，我們需要對測試過程中所采集的數(shù)據(jù)進(jìn)行全面的、深入的分析。這意味著我們在很大程度上需要依賴已經(jīng)保存好的測試結(jié)果數(shù)據(jù)。

從實踐來看，事后分析也要結(jié)合實時分析的來進(jìn)行，主要從以下幾個方面考慮：

1. ?結(jié)合實時分析過程中的一些問題，深入挖掘性能瓶頸

2. 與開發(fā)、運維等相關(guān)人員，就一些問題進(jìn)行深入探討，定位、分析、確定解決方案

   
   

要注意的是，我們要盡可能的采用業(yè)界通用的、專業(yè)的監(jiān)控工具，這樣我們才能擁有盡可能完整的監(jiān)控數(shù)據(jù)，避免使用偏僻的、便宜的工具。

性能測試輸出結(jié)果分析

數(shù)據(jù)統(tǒng)計分析是所有性能測試工具的核心，也是我們對結(jié)果形成系統(tǒng)化的、結(jié)構(gòu)化的分析的核心。所以我們必須具備一定的數(shù)據(jù)統(tǒng)計分析的一些基礎(chǔ)知識。例如：

1.?統(tǒng)計學(xué)基礎(chǔ)，要理解什么是平均數(shù)、中位數(shù)、標(biāo)準(zhǔn)差、正態(tài)分布、百分位數(shù)

2. 了解響應(yīng)時間的一些基本準(zhǔn)則，例如2/5/10響應(yīng)時間，即2秒、5秒、10秒用戶響應(yīng)時間的體驗是怎么樣的，但要注意其中思考時間對其的影響

3. 了解吞吐率和容量，吞吐率關(guān)注一些特定用例執(zhí)行的速度，容量則關(guān)注在單位時間內(nèi)能夠處理多少請求。

4. 關(guān)鍵性能監(jiān)控指標(biāo)，通過這些指標(biāo)我們可以分析服務(wù)器或網(wǎng)絡(luò)的性能等等

5.?JVM指標(biāo)，通過監(jiān)控分析jvm的性能指標(biāo)，我們可以進(jìn)一步的深入堆棧、線程等等性能表現(xiàn)

6.?基準(zhǔn)指標(biāo)，主要關(guān)注服務(wù)端CPU\IO\MEM等等，以深入確定服務(wù)的負(fù)載變化情況

7. 關(guān)鍵網(wǎng)絡(luò)指標(biāo)，我們主要關(guān)注服務(wù)接收到的數(shù)據(jù)量等

8. 施壓機性能，關(guān)注施壓機的性能，以免出現(xiàn)因施壓機的瓶頸導(dǎo)致了我們誤判、甚至錯誤的分析

瓶頸根源分析

為了確定服務(wù)是否具備良好的性能，我們需要關(guān)注哪些方面呢？

1. 通過暴增/遞增/遞減虛擬用戶等模式，來確定負(fù)載、吞吐率、響應(yīng)時間等待，以了解服務(wù)在不同模式下的性能表現(xiàn)

2.?最好將源碼與監(jiān)控工具關(guān)聯(lián)起來，這樣有性能瓶頸的狀態(tài)下，能通過工具的自動化能力，初步的將異常的指標(biāo)與可能的瓶頸源碼關(guān)聯(lián)，便于我們深入挖掘、分析、定位、診斷瓶頸，進(jìn)一步確定調(diào)優(yōu)方案

3.?為了對服務(wù)進(jìn)一步分析，我們經(jīng)常需要獲取服務(wù)瓶頸狀態(tài)下的堆棧信息、線程鎖等信息

4. 尋找性能拐點，通過性能拐點，我們可以快速的確定性能分析重點切入點

5.?性能過程中的錯誤信息，很多時候，在性能測試過程中發(fā)現(xiàn)的錯誤信息能帶領(lǐng)我們直接找到問題所在

6. 沒有對比就沒有傷害，建立合適的性能測試基線，使我們對瓶頸分析的基礎(chǔ)

性能測試分析檢查表

為了系統(tǒng)的、結(jié)構(gòu)化的分析性能，我們要根據(jù)性能測試目標(biāo)，建立起相應(yīng)的性能分析檢查表。主要從三個方面來建立起檢查表：

1.?測試前檢查表

-?服務(wù)配置、監(jiān)控指標(biāo)等，確保服務(wù)的配置正確，相關(guān)指標(biāo)能正確獲取

-?確定性能測試類型，要進(jìn)行哪些性能測試，虛擬用戶增加模式等等

-?確保壓力機可正常壓測

-?性能監(jiān)控工具相關(guān)閾值設(shè)置正確

-?監(jiān)控工具與代碼關(guān)聯(lián)

-?性能監(jiān)控數(shù)據(jù)可正常存入指定的服務(wù)或目錄

2. 測試執(zhí)行過程檢查表

-?記錄好每次性能測試執(zhí)行的結(jié)果，通過這個都會利用工具的自動記錄能力

-?記錄好測試數(shù)據(jù)、結(jié)果，并進(jìn)行簡要的描述

-?記錄好突然出現(xiàn)的錯誤、異常

-?記錄好異常的指標(biāo)，例如突然下降的吞吐率、過長的響應(yīng)時間等

-?記錄好持續(xù)增長的CPU、內(nèi)存、IO消耗等

-?運維、開發(fā)人員的聯(lián)系方式，做好隨時請求他們的支撐

3.?測試結(jié)束后檢測表

在性能測試工作結(jié)束后，我們通常還是需要做一些掃尾工作，以便后續(xù)再次開展或進(jìn)一步回溯性能測試工作，主要有以下幾個方面的工作：

-?不管性能測試實施結(jié)果如何，我們都需要將性能測試過程中搜集的數(shù)據(jù)進(jìn)行備份，存檔

-?將性能測試腳本、數(shù)據(jù)、結(jié)果存檔

-?根據(jù)目標(biāo)群體，撰寫合適的性能測試報告

-?總結(jié)回顧本次性能測試，為后續(xù)性能測試提供參考和規(guī)避可能的坑

微信搜一搜 或 長按加群

開源優(yōu)測