模擬一次超過 5 萬的并發(fā)用戶,你會嗎?

作者:blazemeter
來源:t.cn/ES7KBkW

  • 步驟1 : 編寫你的腳本

  • 步驟2 : 使用JMeter進行本地測試

  • 步驟3 : BlazeMeter沙箱測試

  • 步驟4 : 使用1個控制臺和1個引擎來設(shè)置每個引擎用戶的數(shù)量

  • 步驟5:安裝并測試集群

  • 步驟 6 : 使用 Master / Slave 特性來達成你的最大CC目標


本文將從負載測試的角度,描述了做一次流暢的5萬用戶并發(fā)測試需要做的事情.

你可以在本文的結(jié)尾部分看到討論的記錄.

快速的步驟概要

  1. 編寫你的腳本

  2. 使用JMeter進行本地測試

  3. BlazeMeter沙箱測試

  4. 使用一個控制臺和一個引擎設(shè)置Users-per-Engine的數(shù)量

  5. 設(shè)置并測試你的集合 (1個控制臺和10-14 引擎)

  6. 使用 Master / Slave 特性來達成你的最大CC目標

image

img

步驟1 : 編寫你的腳本

開始之前,請確定從JMeter的Apache社區(qū)jmeter.apache.org 獲得了最新的版本.

你也會要下載這些附加的插件 ,因為它們可以讓你的工作更輕松.

有許多方法可以獲得腳本:

  1. 使用 BlazeMeter 的 Chrome 擴展 來記錄你的方案

  2. 使用 JMeter HTTP(S) 測試腳本記錄器 來設(shè)置一個代理,那樣你就可以運行你的測試并記錄下所有的東西

  3. 從頭開始全部手工構(gòu)建(可能是功能/QA測試)

如果你的腳本是一份記錄的結(jié)果(像步驟1&2), 請牢記:

  1. 你需要改變諸如Username & Password這樣的特定參數(shù),或者你也許會想要設(shè)置一個CSV文件,有了里面的值每個用戶就可以是不同的.

  2. 為了完成諸如“添加到購物車”,“登錄”還有其它這樣的請求,你也許要使用正則表達式,JSON路徑提取器,XPath提取器,來提取諸如Token字符串,表單構(gòu)建ID還有其它要素

  3. 保持你的腳本參數(shù)化,并使用配置元素,諸如默認HTTP請求,來使得在環(huán)境之間切換時你的工作更輕松.

步驟2 : 使用JMeter進行本地測試

在1個線程的1個迭代中使用查看結(jié)果樹要素,調(diào)試樣本,虛擬樣本還有打開的日志查看器(一些JMeter的錯誤會在里面報告),來調(diào)試你的腳本.

遍歷所有的場景(包括True 或者 False的回應(yīng)) 來確保腳本行為確如預(yù)期…

在成功使用一個線程測試之后——將其提高到10分鐘10到20個線程繼續(xù)測試:

  1. 如果你想要每個用戶獨立——是那樣的么?

  2. 有沒有收到錯誤?

  3. 如果你在做一個注冊過程,那就看看你的后臺 - 賬戶是不是照你的模板創(chuàng)建好了? 它們是不是獨立的呢?

  4. 從總結(jié)報告中,你可以看到對測試的統(tǒng)計 - 它們有點用么? (平均響應(yīng)時間, 錯誤, 每秒命中率)

一旦你準備好了腳本:

  1. 通過移除任何調(diào)試和虛擬樣本來清理腳本,并刪除你的腳本偵聽器

  2. 如果你使用了偵聽器(諸如 "將響應(yīng)保存到一個文件"),請確保你沒有使用任何路徑! , 而如果他是一個偵聽器或者一個CSV數(shù)據(jù)集配置——請確保你沒有使用你在本地使用的路徑 - 而只要文件名(就好像跟你的腳本在同一個文件夾)

  3. 如果你使用了自己專有的JAR文件,請確保它也被上傳了.

  4. 如果你使用了超過一個線程組(不是默認的那個) - 請確保在將其上傳到BlazeMeter之前設(shè)置了這個值.

步驟3 : BlazeMeter沙箱測試

如果那時你的第一個測試——你應(yīng)該溫習一下 這篇 有關(guān)如何在BlazeMeter中創(chuàng)建測試的文章.

將沙箱的測試配置設(shè)置成,用戶300,1個控制臺, 時間50分鐘.

對沙箱進行這樣的配置讓你可以在后臺測試你的腳本,并確保上的BlazeMeter的一切都運行完好

為此,先按下灰色的按鈕: 告訴JMeter引擎我想要完全控制! - 來獲得對你的測試參數(shù)的完全控制

通常你將會遇到的問題:

  1. 防火墻 - 確保你的環(huán)境對BlazeMeter的CIDR 列表 (它們會實時更新)開發(fā),并把它們放入白名單中

  2. 確保你所有的測試文件, 比如: CSVs, JAR, JSON, User.properties 等等.. 都可以使用

  3. 確保你沒有使用任何路徑

如果仍然有問題,那就看看錯誤日志吧(你應(yīng)該可以把整個日志都下載下來).

一個沙箱的配置可以是這樣的:

  • 引擎: 是能使控制臺(1 個控制臺 , 0 個引擎)

  • 線程: 50-300

  • 產(chǎn)能提升: 20 分鐘

  • 迭代: 一直測試下去

  • 時間: 30-50 分鐘

這可以讓你在產(chǎn)能提升期間獲得足夠多的數(shù)據(jù)(以防你遇到問題) ,而你將可以對結(jié)果進行分析,以確保腳本的執(zhí)行確如預(yù)期.

你應(yīng)該觀察下Waterfall / WebDriver 選項卡來看看請求是否正常,你不應(yīng)該在這一點上出任何問題(除非你是故意的).

你應(yīng)該盯著監(jiān)控選項卡,觀察期內(nèi)存和CPU消耗 - 這對你在步驟4中嘗試設(shè)置每一個引擎的用戶數(shù)量.

步驟4 : 使用1個控制臺和1個引擎來設(shè)置每個引擎用戶的數(shù)量

現(xiàn)在我們可以肯定腳本能在BlazeMeter中完美運行了——我們需要計算出要多少用戶放到一個引擎中.

如果你能用戶沙箱中的數(shù)據(jù)來做這個決定,那就太棒了!

在這里,我會給出一種不用回頭去查看沙箱測試數(shù)據(jù)就能計算出這個數(shù)的方法.

設(shè)置你的測試配置:

  • 線程數(shù): 500

  • 產(chǎn)能提升:40 分鐘

  • 迭代: 永久

  • 時長: 50 分鐘

使用一個控制臺和一個引擎.

運行測試并(通過監(jiān)視選項卡)對你的測試引擎進行監(jiān)視.

如果你的引擎對于75%的CPI使用率和85%的內(nèi)存使用率都沒有達到(一次性的峰值可以忽略) 的話:

  • 將線程數(shù)調(diào)整到700在測試一次

  • 提交線程的數(shù)量直到線程數(shù)達到1000或者60%的CPU或內(nèi)存使用

如果你的引擎過了75%的CPU使用率或者85%的內(nèi)存使用率(一次性的峰值可以忽略 :

  • 看看你第一次達到75%的點,在那個點有多少并發(fā)用戶.

  • 在運行一次測試, 而不是提高你之前500個用戶數(shù)量的產(chǎn)能

  • 這一次將產(chǎn)能提升放到真實的測試中(5-15 分鐘是一個好的開始) 并將時長設(shè)置為50分鐘.

  • 確保整個測試過程中沒有超過75%的CPU使用率或者85%的內(nèi)存使用率…

為安全起見,你可以把每個引擎的線程數(shù)降低10%的.

步驟5:安裝并測試集群

我們現(xiàn)在知道了從一個引擎中我們得到了多少線程,在該章節(jié)的最后,我們將會知道一個集群能給我們提供多少用戶。

一個集群是指具有一個控制臺(僅有一個)和0-14個引擎的邏輯容器。

即使你可以創(chuàng)建一個使用超過14個引擎的測試案例——但實際上是創(chuàng)建了兩個集群(你可以注意到控制臺的數(shù)量增加了),并且克隆了你的測試案例……

每個集群具有最多14個引擎,是基于BlazeMeter自己本身的測試,以確保控制臺可以控制這14臺引擎對新建的大量數(shù)據(jù)處理的壓力。

所以在這一步驟中,我們會用步驟4種的測試,并且僅僅修改引擎數(shù)量,將其增加到14.

將該測試按照最終測試的全部時長運行。當測試在運行時,打開監(jiān)聽標簽,并且檢驗:

  1. 沒有一個引擎超過CPU75%的占有率和內(nèi)存85%占有率的上限;

  2. 定位你的控制臺標簽(你可以通過一次點擊Logs Tab->Network Information,查看控制臺私有IP地址來找到它的名字)——它不應(yīng)該達到CPU75%占有率和內(nèi)存85%占有率的上限。

如果你的控制臺達到了該上限——減少引擎數(shù)量并重新運行直到控制臺在該上限之下。

在這個步驟的最后,你會發(fā)現(xiàn):

  1. 每個集群的用戶數(shù)量;

  2. 每個集群的命中率。

查看Aggretate Table中的其他統(tǒng)計信息,并找到本地結(jié)果統(tǒng)計圖來獲得有關(guān)你集群吞吐量的更多信息。

步驟 6 : 使用 Master / Slave 特性來達成你的最大CC目標

我們到了最后一步了。

我們知道腳本正在運行,我們也知道一個引擎可以支持多少用戶以及一個集群可以支持多少用戶。

讓我們做一下假設(shè):

  • 一個引擎支持500用戶

  • 一個集群可以用戶12個引擎

  • 我們的目標是5萬用戶測試

因此為了完成這些,我們需要8.3 個集群..

我們可以用8個12臺引擎的集群和一個4太引擎的集群 - 但是像下面這樣分散負載應(yīng)該會更好:

每個集群我們用10臺引擎而不是12,那么每個集群可以支持 10*500 = 5K 用戶并且我們需要10個集群來支持5萬用戶。

這樣可以得到如下好處:

  1. 不用維護兩個不同的測試類型

  2. 我們可以通過簡單的復(fù)制現(xiàn)有集群來增加5K用戶(5K比6K更常見)

  3. 只要需要我們可以一直增加

現(xiàn)在,我們已經(jīng)準備好創(chuàng)建最終的5萬用戶級別的Master / Slave測試了:

  1. 將測試的名稱從"My prod test" 改為"My prod test - slave 1"。

  2. 我們回到步驟5,將高級測試屬性(Advanced Test Properties)下的Standalone修改為Slave。

  3. 按保存按鈕——現(xiàn)在我們有了一個Master和9個Slave中的一個。

  4. 返回你的 "My prod test -slave 1".

  5. 按復(fù)制按鈕

  6. 接下來重復(fù)步驟1-5直到你創(chuàng)建了9個slave。

  7. 回到你的 "My prod test -salve 9" 并按復(fù)制按鈕.

  8. 將測試的名稱改為 "My prod test -Master".

  9. 將高級測試屬性(Advanced Test Properties) 下的Slave改為Master。

  10. 檢查我們剛才創(chuàng)建的所有的Slave(My prod test -salve 1..9)并按保存。

你的5萬用戶級別的Master-Slave測試已經(jīng)準備好了。通過按master上的開始按鈕來運行10個測試,每個測試5千用戶。

你可以修改任意一個測試(salve或master),讓它們來自不同的區(qū)域,有不同的腳本/csv/以及其他文件,使用不同的網(wǎng)絡(luò)模擬器,不同的參數(shù)等。

你可以在一個叫“Master load results”的master報告中的一個新tab頁中找到生成的聚合結(jié)果的報告,你還可以通過打開單個的報告來獨立的查看每一個測試結(jié)果。

英文原文:How to run a load test of 50k+ concurrent users

參與翻譯: LeoXu, 0x0bject, 麥殼原野, 中獎啦

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務(wù)。
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 228,030評論 6 531
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 98,310評論 3 415
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 175,951評論 0 373
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經(jīng)常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 62,796評論 1 309
  • 正文 為了忘掉前任,我火速辦了婚禮,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當我...
    茶點故事閱讀 71,566評論 6 407
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 55,055評論 1 322
  • 那天,我揣著相機與錄音,去河邊找鬼。 笑死,一個胖子當著我的面吹牛,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 43,142評論 3 440
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 42,303評論 0 288
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 48,799評論 1 333
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 40,683評論 3 354
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 42,899評論 1 369
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,409評論 5 358
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 44,135評論 3 347
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 34,520評論 0 26
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 35,757評論 1 282
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 51,528評論 3 390
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 47,844評論 2 372