jmeter性能指标
Aggregate Report 是?JMeter?常用的一個 Listener,中文被翻譯為“聚合報告”。今天再次有同行問到這個報告中的各項數(shù)據(jù)表示什么意思,順便在這里公布一下,以備大家查閱。
如果大家都是做Web應用的性能測試,例如只有一個登錄的請求,那么在Aggregate Report中,會顯示一行數(shù)據(jù),共有10個字段,含義分別如下。
Label:每個 JMeter 的 element(例如 HTTP Request)都有一個 Name 屬性,這里顯示的就是 Name 屬性的值
#Samples:表示你這次測試中一共發(fā)出了多少個請求,如果模擬10個用戶,每個用戶迭代10次,那么這里顯示100
Average:平均響應時間——默認情況下是單個 Request 的平均響應時間,當使用了 Transaction Controller 時,也可以以Transaction 為單位顯示平均響應時間
Median:中位數(shù),也就是 50% 用戶的響應時間
90% Line:90% 用戶的響應時間
Note:關于 50% 和 90% 并發(fā)用戶數(shù)的含義,請參考下文
http://www.cnblogs.com/jackei/archive/2006/11/11/557972.html
Min:最小響應時間
Max:最大響應時間
Error%:本次測試中出現(xiàn)錯誤的請求的數(shù)量/請求的總數(shù)
Throughput:吞吐量——默認情況下表示每秒完成的請求數(shù)(Request per Second),當使用了 Transaction Controller 時,也可以表示類似?LoadRunner?的 Transaction per Second 數(shù)
KB/Sec:每秒從服務器端接收到的數(shù)據(jù)量,相當于LoadRunner中的Throughput/Sec
?
?
?
一、基本概念
1.測試計劃是使用?JMeter?進行測試的起點,它是其它?JMeter?測試元件的容器。
2.線程組:代表一定數(shù)量的并發(fā)用戶,它可以用來模擬并發(fā)用戶發(fā)送請求。實際的請求內(nèi)容在Sampler中定義,它被線程組包含。可以在“測試計劃->添加->線程組”來建立它,然后在線程組面板里有幾個輸入欄:線程數(shù)、Ramp-Up Period(in seconds)、循環(huán)次數(shù),其中Ramp-Up Period(in seconds)表示在這時間內(nèi)創(chuàng)建完所有的線程。如有8個線程,Ramp-Up = 200秒,那么線程的啟動時間間隔為200/8=25秒,這樣的好處是:一開始不會對服務器有太大的負載。線程組是為模擬并發(fā)負載而設計。
3、取樣器(Sampler):模擬各種請求。所有實際的測試任務都由取樣器承擔,存在很多種請求。如:HTTP 、ftp請求等等。
4、監(jiān)聽器:負責收集測試結(jié)果,同時也被告知了結(jié)果顯示的方式。功能是對取樣器的請求結(jié)果顯示、統(tǒng)計一些數(shù)據(jù)(吞吐量、KB/S……)等。
6、斷言:用于來判斷請求響應的結(jié)果是否如用戶所期望,是否正確。它可以用來隔離問題域,即在確保功能正確的前提下執(zhí)行壓力測試。這個限制對于有效的測試是非常有用的。
7、定時器:負責定義請求(線程)之間的延遲間隔,模擬對服務器的連續(xù)請求。
5、邏輯控制器:允許自定義JMeter發(fā)送請求的行為邏輯,它與Sampler結(jié)合使用可以模擬復雜的請求序列。
8. 配置元件維護Sampler需要的配置信息,并根據(jù)實際的需要會修改請求的內(nèi)容。
9. 前置處理器和后置處理器負責在生成請求之前和之后完成工作。前置處理器常常用來修改請求的設置,后置處理器則常常用來處理響應的數(shù)據(jù)。
二、Jmeter報告 (轉(zhuǎn)載)
http://www.cnblogs.com/jackei/archive/2006/11/13/558720.html
1、Aggregate Report 解析
Aggregate Report 是?JMeter?常用的一個 Listener,中文被翻譯為“聚合報告”。今天再次有同行問到這個報告中的各項數(shù)據(jù)表示什么意思,順便在這里公布一下,以備大家查閱。
如果大家都是做Web應用的性能測試,例如只有一個登錄的請求,那么在Aggregate Report中,會顯示一行數(shù)據(jù),共有10個字段,含義分別如下。
Label:每個?JMeter?的 element(例如 HTTP Request)都有一個 Name 屬性,這里顯示的就是 Name 屬性的值
#Samples:表示你這次測試中一共發(fā)出了多少個請求,如果模擬10個用戶,每個用戶迭代10次,那么這里顯示100
Average:平均響應時間——默認情況下是單個 Request 的平均響應時間,當使用了 Transaction Controller 時,也可以以Transaction 為單位顯示平均響應時間
Median:中位數(shù),也就是 50% 用戶的響應時間
90% Line:90% 用戶的響應時間
Note:關于 50% 和 90% 并發(fā)用戶數(shù)的含義,請參考下文
http://www.cnblogs.com/jackei/archive/2006/11/11/557972.html
Min:最小響應時間
Max:最大響應時間
Error%:本次測試中出現(xiàn)錯誤的請求的數(shù)量/請求的總數(shù)
Throughput:吞吐量——默認情況下表示每秒完成的請求數(shù)(Request per Second),當使用了 Transaction Controller 時,也可以表示類似 LoadRunner 的 Transaction per Second 數(shù)
KB/Sec:每秒從服務器端接收到的數(shù)據(jù)量,相當于LoadRunner中的Throughput/Sec
基本知識:
1、吞吐量:是指在沒有幀丟失的情況下,設備能夠接受的最大速率。
2、存儲的最小單位是字節(jié)Byte,對于存儲單位,有以下幾個單位,GB、MB和KB,那么這三者之間的換算關系是:1GB=1024MB,1MB=1024KB,1KB=1024Bytes。
Bit :“位”,稱為bit,也就是比特,有的時候也稱為位。一個字節(jié)為8位二進制表示。
Byte:“字節(jié)”,一個字節(jié)就是8比特。
3、Mbps (million bits per second 兆位/秒) 代表每秒傳輸1,000,000比特。該縮寫用來描述數(shù)據(jù)傳輸速度。例如:4Mbps=每秒鐘傳輸4M比特。
數(shù)據(jù)傳輸速率的單位,字母b(bit)是比特和字母 B (Byte)是字節(jié)。
4、吞吐量與帶寬的區(qū)分:吞吐量和帶寬是很容易搞混的一個詞,兩者的單位都是Mbps.先讓我們來看兩者對應的英語,吞吐量:throughput ; 帶寬: Max net bitrate 。當我們討論通信鏈路的帶寬時,一般是指鏈路上每秒所能傳送的比特數(shù)。我們可以說以太網(wǎng)的帶寬是10Mbps。但是,我們需要區(qū)分鏈路上的可用帶寬(帶寬)與實際鏈路中每秒所能傳送的比特數(shù)(吞吐量)。我們傾向于用“吞吐量”一次來表示一個系統(tǒng)的測試性能。這樣,因為實現(xiàn)受各種低效率因素的影響,所以由一段帶寬為10Mbps的鏈路連接的一對節(jié)點可能只達到2Mbps的吞吐量。這樣就意味著,一個主機上的應用能夠以2Mbps的速度向另外的一個主機發(fā)送數(shù)據(jù)。
5、方差和標準差都是用來描述一組數(shù)據(jù)的波動性的(集中還是分散),標準差的平方就是方差。方差越大,數(shù)據(jù)的波動越大。
三.利用BadBoy生成測試計劃(測試腳本)
badBoy可以非常容易的生成web的測試腳本。類似與LoadRunner的使用,輸入站點的URL,點擊Record開始錄制。File –> Export to?Jmeter?,導出為Jmeter認識的測試腳本。
四.一個簡單的測試示例思路(目前自己思路,不斷改進)
a. 需要的“測試腳本”,對應web的應用使用badboy生成測試腳本。直接導入Jmeter,進行配置。
b.如圖
TestPlan :是整個Jmeter測試執(zhí)行的容器。
ThreadGroup :模擬請求,定義線程數(shù)、Ramp-Up Period、循環(huán)次數(shù)。
Step1 :循環(huán)控制器 ,控制Sample的執(zhí)行次數(shù)。
Sample取樣器 :決定進行那種類型的測試,如http、ftp等。
監(jiān)聽器 :圖形結(jié)果、聚合報告。
定時器 :Random類型,定義線程請求的延遲。
c.聚合報告的解釋
Label :各個模擬測試的名稱
#Samples :各個測試的樣本總數(shù)
Average :每個請求的平均響應時間
Median :中值,即50%請求的平均響應時間
90%Line :90%請求的響應時間
Min :最小響應時間 ,Max :最大的響應時間
Error% :錯誤響應的概率。即無法響應的概率。
ThroughPut :吞吐量 -- 默認情況下表示每秒完成的請求數(shù)(Request per Second)。
KB/Sec :每秒從服務器端接收到的數(shù)據(jù)量。
五.Jmeter常見問題 (轉(zhuǎn)載) http://www.51testing.com/?uid-128005-action-viewspace-itemid-84094
說明:這些問答是從網(wǎng)上轉(zhuǎn)載的,自己修改了其中的一些內(nèi)容,如果大家興趣,可以將大家在使用Jmeter的時候碰到的問題寫下來,我們一起補充到這個問答里面,共同努力完善jmeter的資料。
1.?JMeter的工作原理是什么?
向服務器提交請求;從服務器取回請求返回的結(jié)果。
2.?JMeter的作用?
JMeter可以用于測試靜態(tài)或者動態(tài)資源的性能(文件、Servlets、Perl腳本、java對象、數(shù)據(jù)庫和查詢、ftp服務器或者其他的資源)。JMeter用于模擬在服務器、網(wǎng)絡或者其他對象上附加高負載以測試他們提供服務的受壓能力,或者分析他們提供的服務在不同負載條件下的總性能情況。你可以用JMeter提供的圖形化界面分析性能指標或者在高負載情況下測試服務器/腳本/對象的行為。
3. 怎樣能看到jmeter提供的腳本范例?
在\JMeter\jakarta-jmeter-2.0.3\xdocs\demos目錄下。
4. 怎樣設置并發(fā)用戶數(shù)?
選中可視化界面中左邊樹的Test?Plan節(jié)點,單擊右鍵,選擇Add-> Thread Group,其中Number of Threads參數(shù)用來設置發(fā)送請求的用戶數(shù)目。
5.?JMeter的運行指示?
Jmeter在運行時,右上角有個單選框大小的小框框,運行是該框框為綠色,運行完畢后,該框框為白色。
6. User Parameters的作用是什么?
提高腳本可用性
7. 在result里會出現(xiàn)彩色字體的http response code,說明什么呢?
Http response code是http返回值,彩色字體較引人注目,可以使用戶迅速關注。象綠色的302就說明在這一步驟中,返回值取自本機的catch,而不是server。
8. 怎樣計算Ramp-up period時間?
Ramp-up period是指每個請求發(fā)生的總時間間隔,單位是秒。如果Number of Threads設置為5,而Ramp-up period是10,那么每個請求之間的間隔就是10/5,也就是2秒。Ramp-up period設置為0,就是同時并發(fā)請求。
9. Get和Post的區(qū)別?
他們是http協(xié)議的2種不同實現(xiàn)方式。Get是指server從Request URL取得所需參數(shù)。從result中的request中可以看到,get可以看到參數(shù),但是post是主動向server發(fā)送參數(shù),所以一般看不到這些參數(shù)的。
10. 哪些原因可能導致error的產(chǎn)生?
a. Http錯誤,包括不響應,結(jié)果找不到,數(shù)據(jù)錯誤等等;
b.?JMeter本身原因產(chǎn)生的錯誤。
11. 為什么Aggregate Report結(jié)果中的Total值不是真正的總和?
JMeter給結(jié)果中total的定義是并不完全指總和,為了方便使用,它的值表現(xiàn)了所在列的代表值,比如min值,它的total就是所在列的最小值。下圖就是total在各列所表示的意思。
12.?JMeter的Thread Number是提供多個不同用戶并發(fā)的功能么?
不是,Thread Number僅僅是指并發(fā)數(shù),如果需要實現(xiàn)多個不同用戶并發(fā),我們應該采用其它方法,比如通過在jmeter外建立csv文件的方法來實現(xiàn)。
13. 同時并發(fā)請求時,若需要模擬不同的用戶同時向不同的server并發(fā)請求,怎樣實現(xiàn)呢?
方法很靈活,我們可以將不同的server在thread里面預先寫好?;蛘哳A先將固定的變量值寫入csv文件,這樣還可以方便修改。然后將文件添加到User Parameters。
14. User Parameter中的DUMMY是什么意思?
當其具體內(nèi)容是${__CSVRead(${__property(user.dir)}${FILENAME},next())}時用來模擬讀文件的下一行。
15. 當測試對象在多server間跳轉(zhuǎn)時,應該怎樣處理?
程序運行時,有些http和隱函數(shù)會攜帶另外的server IP,我們可以從他們的返回值中獲取。
16. 為何測試對象是http和https混雜出現(xiàn)?
Https是加密協(xié)議,為了安全,一般不推薦使用http,但是有些地方,使用https過于復雜或者較難實現(xiàn),會采用http協(xié)議。
17. Http和https的默認端口是什么?
Apache server (Http)的默認端口是80;
SSL (Https)的默認端口是443。
18. 為何在run時,有些頁面失敗,但是最后不影響結(jié)果?
原因較多,值得提及的一種是因為主流頁面與它不存在依賴關系,所以即使這樣的頁面出錯,也不會影響運行得到正常結(jié)果,但是這樣會影響到測試的結(jié)果以及分析結(jié)果。
19. 為什么腳本剛開始運行就有錯誤,其后來的腳本還可運行?
在Thread Group中有相關設置,如果選擇了continue,即使前面的腳本出現(xiàn)錯誤,整個thread仍會運行直到結(jié)束。選擇Stop Thread會結(jié)束當前thread;選擇Stop Test則會結(jié)束全部的thread。推薦選項是Stop Thread。
20. 在Regular expression_r Extractor會看到Template的值是$1$,這個值是什么意思呢?
$1$是指取第一個()里面的值。如果Regular expression_r的數(shù)值有多個,用這種方法可以避免不必要的麻煩。
21. Regular expression_r中的(.*)是什么意思?
那是一個正則表達式(regular expression_r)?!?’等同于sql語言中的’?’,表示可有可無?!?’表示0個或多個。’()’表示需要取值。(.*)表達任意長度的字符串。
22. 在讀取Regular expression_r時要注意什么?
一定要保證所取數(shù)值的絕對唯一性。
23. 怎樣才能判斷什么樣的情況需要添加Regular expression_r Extractor?
檢查Http Request中的Send Parameters,如果有某個參數(shù)是其前一個page中所沒有給出的,就要到原文件中查找,并添加Regular expression_r Extractor到其前一page的http request中。
24. 在自動獲取的腳本中有時會出現(xiàn)空的http request,是什么意思呢?
是因為在獲取腳本時有些錯誤,是腳本工具原因。在run時這種錯誤不參與運行的。
25. 在運行結(jié)果中為何有rate為N/A的情況出現(xiàn)?
可能因為JMeter自身問題造成,再次運行可以得到正確結(jié)果。
26. 常用http錯誤代碼有哪些?
400無法解析此請求。
403禁止訪問:訪問被拒絕。
404找不到文件或目錄。
405用于訪問該頁的HTTP動作未被許可。
410文件已刪除。
500服務器內(nèi)部錯誤。
501標題值指定的配置沒有執(zhí)行。
502 Web服務器作為網(wǎng)關或代理服務器時收到無效的響應。
27. Http request中的Send Parameters是指什么?
是指code中寫定的值和自定義變量中得到的值,就是在運行頁面時需要的參數(shù)。
28. Parameters在頁面中是不斷傳遞的么?
是的。參數(shù)再產(chǎn)生后會在頁面中一直傳遞到所需頁面。所以我們可以在動態(tài)參數(shù)產(chǎn)生時捕獲它,也可以在所需頁面的上一頁面捕獲。(但是這樣可能有錯誤,最好在產(chǎn)生頁面獲取)
29. 在使用JMeter測試時,是完全模擬用戶操作么?造成的結(jié)果也和用戶操作完全相同么?
是的。JMeter完全模擬用戶操作,所以操作記錄會全部寫入DB.在運行失敗時,可能會產(chǎn)生錯誤數(shù)據(jù),這就取決于腳本檢查是否嚴謹,否則錯誤數(shù)據(jù)也會進入DB,給程序運行帶來很多麻煩。
六.Jmeter測試心得(轉(zhuǎn)載) http://www.javaeye.com/topic/211216
企業(yè)應用開發(fā)過程中,性能測試是很重要的一個環(huán)節(jié),在這個環(huán)節(jié)中Apache的JMeter以它開源、100%純Java、操作方便等優(yōu)點發(fā)揮著很大的作用。
經(jīng)過一段時間的使用,多少有些心得和技巧,拿出來共享,希望能有些幫助。
1、制作測試腳本:
手工制作測試腳本,需要你知道請求的url和攜帶的參數(shù)等等,太花費時間,
所以可以用badboy工具錄制腳本。這個工具雖然不是開源的,但是卻可以用來免費的錄制成.jmx的腳本,使用起來很方便。
官方網(wǎng)站是:http://www.badboy.com.au/
2、出現(xiàn)亂碼了?
在用JMeter發(fā)行HTTPRequest時,在請求參數(shù)中有中文時,發(fā)現(xiàn)存儲到DB中后,相應的字段是亂碼,
明明在參數(shù)后面的Encode選項中打了V。后來發(fā)現(xiàn)badboy錄制腳本的時候并沒有記錄編碼方式,所以修改腳本,
在Content encoding中設置正確的編碼方式就不會出現(xiàn)亂碼了。
3、JMeter的妙用---準備測試數(shù)據(jù):
要求性能測試開始前,先準備5W條數(shù)據(jù)。當然可以通過直接修改DB,但是如果這5W條數(shù)據(jù)涉及到很多表的關聯(lián),
甚至還要通過存儲過程的處理怎么辦,直接修改DB很容易出現(xiàn)錯誤的數(shù)據(jù),要是在客戶的機器上弄錯,可就闖禍了。
這時候想到了JMeter,它本來是用來模擬大量用戶并發(fā)請求的,現(xiàn)在用它來批量的生成數(shù)據(jù)吧。
如果要求每條數(shù)據(jù)都不同,就要修改腳本,使用JMeter的函數(shù)來動態(tài)產(chǎn)生數(shù)據(jù),比較常用的是CSVRead函數(shù),
記不住名的話Ctrl+F可以呼喚出函數(shù)助手。使用這個函數(shù)的時候需要注意幾點,首先是csv文件的編碼格式,
使用ansi沒有問題,使用unicode時會使讀取的第一行數(shù)據(jù)出現(xiàn)錯誤;
${__CSVRead(data.txt,0)}---讀取本行的第一列值
${__CSVRead(data.txt,1)}${__CSVRead(data.txt,next)}---讀取本行的第二列值,并把行標移動到下一行
試驗證明JMeter應該做好了同步,在多線程環(huán)境下上面的調(diào)用方法沒有問題;
最后,修改JMeter的線程數(shù)會加快數(shù)據(jù)生成的速度,原理是當并發(fā)線程在20左右的時候會達到最大的吞吐量(request/分),
所以應該設定線程數(shù)20左右。
4、JMeter中debug方法:
JMeter提供了log函數(shù)輸出log,但是有時候并不好用,比如我想輸出某個函數(shù)的返回值看是不是正確的,
${__log(${__CSVRead(data.txt,1)})}這樣的寫法是錯誤的,JMeter會拋出異常,該怎么辦呢?
答案是巧用監(jiān)聽器(Listener)來輸出想看到的數(shù)據(jù),結(jié)果顯示為樹的那個監(jiān)聽器,
它可以讓你查看每個sampler的請求數(shù)據(jù)和響應數(shù)據(jù),在請求數(shù)據(jù)中就有你想看到的信息。
5、常用的功能:
?使用HTTP Cookie Manager或URL重寫實現(xiàn)同一線程內(nèi)的多個請求共享Session。
?把Login的請求放到只執(zhí)行一次的控制器中,那么即使循環(huán)多次,Login也只請求一次。
?如果想讓多個線程在同一時刻同時請求,那么用Synchronizing Timer來做集合點。
?為了節(jié)省系統(tǒng)資源,使用非窗口模式運行JMeter(jmeter?-n -t test.jmx)
?如果模擬并發(fā)用戶過多,比如200線程,那么可以分散到多臺機器上運行Jmeter(比如4臺電腦,每臺50線程)
更多功能請參照使用手冊
中文手冊(未完成)http://wiki.javascud.org/pages/viewpage.action?pageId=5566
6、在winnt系統(tǒng)上,使用perfmon來幫助Jmeter采集服務器的系統(tǒng)資源數(shù)據(jù),可以配置log輸出這些數(shù)據(jù)作為性能瓶頸分析時使用。
轉(zhuǎn)載于:https://www.cnblogs.com/yyh8/p/7877997.html
總結(jié)
以上是生活随笔為你收集整理的jmeter性能指标的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: [模板]洛谷T3379 最近公共祖先(L
- 下一篇: input type=submit 和b