如何做一份精致的性能測試報告？

以上是我在知乎提出的問題，感謝梧桐同學(xué)的回答，Quote中的文字是我的描述
在做系統(tǒng)的過程中會遇到需要對整個系統(tǒng)做測試的情況，包括一些基準(zhǔn)測試，容量測試，壓力測試等。如何做一份精致的性能報告書，在測試過程中有哪些量化指標(biāo)是需要重點考慮的？

---

有一個現(xiàn)象是很奇怪的，在這行業(yè)6年到現(xiàn)在為止，我嘗試弄清楚各種性能測試的概念，但是至今貌似沒有一個統(tǒng)一的標(biāo)準(zhǔn)，因此大伙理解的某個性能測試方法和我所理解的可能完全相反。有人可以為性能測試定義3種方法、也有7種的、甚至更多，但是無論多少種，都是一種方法總有它對應(yīng)的需求，而性能需求就是干系人的需求，這種需求實在不容易分類。以下是我針對自己的理解進行的一些回答：

“如何做一份精致的性能測試報告？”

題主已經(jīng)列舉出了基準(zhǔn)測試、容量測試、壓力測試，相信對這些測試也已經(jīng)有一定的了解，但如果題主再進一步了解一定會發(fā)現(xiàn)，其實，這些測試并不是所有項目干系人都會關(guān)心的。

答主在這里說到了項目中不同的人所關(guān)心的測試的不同維度

譬如作為系統(tǒng)最終用戶來說，根本不可能去關(guān)心系統(tǒng)的性能基準(zhǔn)，最終用戶往往關(guān)心的是系統(tǒng)能夠帶給他的實際性能體驗，好比你去秒殺搶購，你只關(guān)心你要到達的付款頁面有多快響應(yīng)，根本不會管系統(tǒng)性能基準(zhǔn)在哪一個水平、系統(tǒng)性能容量如何、如何通過設(shè)備的擴展為性能帶來伸縮。

但是，這些恰恰問題又是系統(tǒng)的運維人員關(guān)心的，運維人員還關(guān)心“配置測試”，通過對被測系統(tǒng)軟硬件環(huán)境的調(diào)整，了解各種不同環(huán)境/不同參數(shù)對性能測試影響的程度，從而找到各項資源的最優(yōu)分配原則、還有可靠性測試、失效恢復(fù)測試，即某一設(shè)備出現(xiàn)故障以后系統(tǒng)是否仍然能夠提供正常的響應(yīng)服務(wù)，對于開發(fā)人員來說，他們關(guān)心的是鎖、是內(nèi)存泄漏諸如此類的設(shè)計和實現(xiàn)問題。

• 用戶: 實際體驗性能
• 運維: 優(yōu)化，可用，恢復(fù)
• 開發(fā): BUG，性能

我所理解的、精制的性能測試報告：是一份能夠通俗的顯示用戶實際獲得性能體驗的的測試報告、或者是一份能夠告知系統(tǒng)運維人員系統(tǒng)所面臨實際性能風(fēng)險的性能測試報告、又或者是一份能夠告訴開發(fā)人員系統(tǒng)設(shè)計實現(xiàn)上所存在的性能缺陷報告，就這些問題來說，往往都不會出現(xiàn)在同一份的報告當(dāng)中。所以，請先弄清楚報告面對的項目干系人是誰、他所關(guān)系的究竟是什么。

在測試過程中有哪些量化指標(biāo)是需要重點考慮的？

從用戶角度來說，平均響應(yīng)時間能夠很好的衡量用戶整體所獲得的性能體驗，但前提是同一請求響應(yīng)時間整體分布上必須呈現(xiàn)的是正態(tài)分布，否則平均響應(yīng)時間除了誤導(dǎo)你，什么用都沒有。

所以，一個更有參考價值，但是可能會為測試人員和開發(fā)人員帶來不必要麻煩的指標(biāo)是響應(yīng)時間的90百分位，也就是90%請求響應(yīng)時間所處于的范圍，這是一個對系統(tǒng)比較苛刻的指標(biāo)，但是非常靠譜。

相應(yīng)時間區(qū)間來作為速度衡量指標(biāo)

除了平均響應(yīng)時間和響應(yīng)時間90百分位值，還有響應(yīng)時間的“標(biāo)準(zhǔn)差”也是作為衡量整體用戶所能獲得實際性能體驗是否穩(wěn)定的指標(biāo)，在“相對穩(wěn)定”的性能體驗中，標(biāo)準(zhǔn)差（經(jīng)驗來說）往往是平均值的一半。

相應(yīng)時間標(biāo)準(zhǔn)差作為穩(wěn)定指標(biāo)

訪問應(yīng)用服務(wù)時在帶寬上每秒的吞吐表面上是一種網(wǎng)絡(luò)資源開銷，但系統(tǒng)對帶寬的占用實際上影響著用戶的性能體驗。

從運維與開發(fā)角度來說，一定也有著他們自己的性能指標(biāo)閾值標(biāo)準(zhǔn)、或他們所關(guān)心的性能風(fēng)險，例如CPU的占用率、內(nèi)存、硬盤性能計數(shù)器、JVM內(nèi)存、GC頻率與暫停時間等等。

運維和開發(fā)以硬件消耗率作為指標(biāo)

總結(jié)

對于項目/產(chǎn)品經(jīng)理來說，在報告中要著重說明不同的業(yè)務(wù)場景、場景中不同的負載級別下，用戶所能獲得的實際性能體驗是什么；對于運維人員來說，在報告中要著重說明系統(tǒng)在資源開銷上的風(fēng)險、設(shè)備資源上擴充、配置的變更產(chǎn)生的影響；對于開發(fā)人員來說，在報告中著重說明設(shè)計上的缺陷，鎖、內(nèi)存泄漏、資源開銷與釋放等。

轉(zhuǎn)載于:https://www.cnblogs.com/Bozh/p/3806155.html

總結(jié)

以上是生活随笔為你收集整理的[原]如何做一份精致的性能测试报告？的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯，歡迎將生活随笔推薦給好友。