精準測試可行性分析

第一部分 精準測試概述

一、背景

? ? 公司慢慢的進入到敏捷開發模式,在此模式下,迭代頻繁,回歸測試時,總不知道變更的地方在哪里?有時知道修改的地方在哪里,但卻不知道影響的范圍有多大,通常情況,要么測試范圍定小了,遺漏了,要么測試范圍過大,付出過多的代價,每次回歸,測試心里總是沒底氣,生怕漏了哪里,每次上線都是一次驚心動魄的實驗,如何才能準確定位到變更的范圍呢?故此引出精準測試概念;

二、?可行性研究結論

1、? 通過是這個探索能讓我們更加深入的去了解被測系統及架構,在保障質量的前提下,在不斷的版本迭代過程中更加高效、可靠、自信地制定合理的測試計劃和執行我們的測試工作。

2、 精準測試對于企業來說通過測試人員的管理,中后期的測試效率以及不依賴個人能力等特點,大大降低了企業測試團隊成本,精準測試通過一系列技術手段在不改變原有的測試流程大幅度降低測試人員要求,并在中后期的測試效率上給予大幅度的幫助提高質量,這使得企業成本的核心公式計算中發生了轉變。

3、 精準測試為企業帶來的是明確的、數字化的對于產品質量的信心,而并不是對于團隊的模糊的基于能力的、經驗的判斷。

三、存在的問題及建議

1、? 精準測試基于自動化覆蓋率到達一定數量的基礎上去做比較有意義。

2、 精準測試的核心需求來自于對軟件質量的較高要求,如果是需求響應快,而且產品發布成本低,快速試錯的小流量新功能,對發布質量并不太敏感,則不適合精準測試,如果需要準確把握用戶的需求,需要進行系統測試,通常采用用戶測試的方式對項目進行驗收,對項目的上線質量比較敏感,則使用精準測試的產出比較高!

第二部分精準測試發起過程及提出的理由

一、背景詳解

公司經過了如下階段:

第一階段,公司剛起步,產品初創,需要先把東西做出來獲得市場的初步驗證,或獲得投資人的認可。這個階段,測試團隊基本屬于手工測試,人數也沒有那么多;

第二階段,公司開始快速擴張,不計研發成本,每天都在不斷地招聘測試人員,業務快速擴充,業務需求多時間緊,測試也沒有時間沉淀;

第三階段,經過快速擴張后開始穩定運作,成本開始被考慮。業務線基本穩定,測試開始沉淀一些流程、技能、方法等來提高測試效率,比如自動化平臺建立,接口自動化的接入,性能、安全方面的沉淀,都一步一步的穩定建立;

現在公司來到了第三階段,慢慢的會進入第四階段,開始嚴格控制各個環節的成本,測試的工作也會往上轉移,自動化代碼的質量保證,開發代碼的內部邏輯深入,覆蓋率的分析等等,不管如何深入,還是會碰到如下痛點:

1、 敏捷迭代更新快,人力有限;

2、 多分支代碼合并到主分支,修改哪個文件哪個行,測試不可控;

3、代碼更新影響哪些功能無感知;

4、盲測,上線風險大;

5、 無法更加精準監控代碼質量;

6、不能做到高效精準,不可衡量roi;

故此,提出“精準測試”概念,一種可追溯的軟件測試技術;


二、?精準測試核心及關鍵特性

? ??首先概述下精準測試概念,從字面理解,精準就是非常準確。非常準確需要用數字說話。

????在測試領域,精準測試是一套計算機測試輔助分析系統,對測試過程的活動進行監控,將采集到的監控數據進行分析,得到精準的量化數據,使用這些量化數據進行質量評價,利用這些分析數據可以促進測試過程的不斷完善,形成度量及分析閉環。精準測試就是一種可追溯的軟件測試技術。

1、精準測試核心

? ? ? ?精準測試的核心思想就是使用非常精確和智能的軟件來解決軟件測試的問題,從根本上引領從經驗型方法向技術型方法的轉型。質量的評估不再靠經驗,而是通過精準的數據來判定。

?????? 精準測試沒有改變傳統的軟件測試方法,區別只在于,由軟件去采集測試過程執行的代碼邏輯及測試數據的過程,自動建立測試用例與程序代碼之間的邏輯關系。在測試過程加入軟件的采集過程,可以形成正向和逆向的追溯。

?????? 通過正向追溯,開發人員可以看到測試人員執行用例的代碼細節,以方便進行缺陷的修復,測試數據可以直接為開發調試提供依據,快速定位并修復缺陷。

?????? 通過逆向追溯,測試人員通過修改的源代碼快速確定測試用例的范圍,極大減少回歸測試的盲目性和工作量,快速修訂測試用例,達到測試覆蓋率最大化。

第三部分精準測試技術方案

????對于精準測試方案,其核心內容是在知識庫里包含著測試用例和開發代碼的關聯關系,代碼改動后,推薦改動關聯的相應測試用例,爭取做到,改哪里測哪里,達到精準測試境界;

? ? ?以下是針對精準測試流程及細節的方案思考,從大流程到小流程小細節的順序進行闡述

一、產品研發流程:


二、精準測試系統流程圖


(2-1)差異化分析流程圖


(2-2)測試分析流程圖



建立知識庫


知識庫數據庫大概方案:



獲取方法調用鏈動態工具闡述,(暫時未進行工具的詳細分析):

插樁方式工具

1、源代碼插樁:GCT等

2、中間代碼插樁:JACOCO\EMMA等

3、二進制代碼插樁:XDebug等

(2-3)用例執行流程圖


(2-4)質量評估流程圖


第四部分? 總結

????精準測試的核心是一自動化的軟件對軟件測試過程數據進行記錄,從而實現精準測試用例推薦。通過精準測試,我們可以實現軟件質量的實時監控,回歸用例的智能篩選,測試覆蓋率的精準分析以及軟件缺陷的快速定位。???????

? ? ?但精準測試并非適用于所有的軟件項目類型,互聯網應用、項目級應用和產品級應用,對軟件質量的需求,也就是對精準測試的要求是逐漸遞增的。???????

? ? ? ?精準測試的誕生,核心原因是對于軟件質量的要求。無論是項目驗收公信力手段、測試效率管控、測試與開發人員的協同以及復雜的分布式架構帶來的挑戰,無不圍繞著對軟件質量的需求滿足。而軟件質量的最終價值,是用戶體驗的提升。對精準測試的實現過程,實際上也是軟件測試過程數字化的一種體現。精準測試通過提升軟件質量,改善了用戶體驗,從而賦予企業數字化轉型更可靠的軟件能力。?

最后編輯于
?著作權歸作者所有,轉載或內容合作請聯系作者
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發布,文章內容僅代表作者本人觀點,簡書系信息發布平臺,僅提供信息存儲服務。
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 227,797評論 6 531
  • 序言:濱河連續發生了三起死亡事件,死亡現場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機,發現死者居然都...
    沈念sama閱讀 98,179評論 3 414
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 175,628評論 0 373
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 62,642評論 1 309
  • 正文 為了忘掉前任,我火速辦了婚禮,結果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當我...
    茶點故事閱讀 71,444評論 6 405
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發上,一...
    開封第一講書人閱讀 54,948評論 1 321
  • 那天,我揣著相機與錄音,去河邊找鬼。 笑死,一個胖子當著我的面吹牛,可吹牛的內容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 43,040評論 3 440
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 42,185評論 0 287
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當地人在樹林里發現了一具尸體,經...
    沈念sama閱讀 48,717評論 1 333
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 40,602評論 3 354
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發現自己被綠了。 大學時的朋友給我發了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 42,794評論 1 369
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,316評論 5 358
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質發生泄漏。R本人自食惡果不足惜,卻給世界環境...
    茶點故事閱讀 44,045評論 3 347
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 34,418評論 0 26
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 35,671評論 1 281
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 51,414評論 3 390
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 47,750評論 2 370

推薦閱讀更多精彩內容