Test Double總結

Test Double

第一次了解Test Double是在Martin Fowler的文章Test Double中,Gerard Meszaros提出了這個概念。雖然是06年的文章了,但里面的概念并不過時。這篇文章提到Test Double只是一個通用的詞,代表為了達到測試目的并且減少被測試對象的依賴,使用“替身”代替一個真實的依賴對象,從而保證了測試的速度和穩定性。

在項目中,我們時常會遇到由于待測系統依賴組件無法工作而造成的測試阻礙,這是嚴重影響項目交付的風險之一,而Test Double就是規避這個風險的手段。在測試過程中,我們使用Test Double替代真實的依賴組件去和待測系統進行交互,Test Double不必和真實的依賴組件的實現一模一樣,比如不用去實現依賴組件復雜的內部邏輯等,我們只需要在滿足測試需求范圍內,確保對于待測系統來說Test Double提供的API是和依賴組件提供的一樣的,API是怎么實現的在這個上下文就顯得不重要了。基于這個特點,Test Double多用于自動化測試比如單元測試和集成測試。

那么Test Double就是萬能的嗎?顯然不是,畢竟我們是使用的是替代品而不是真實產品環境的配置,所以我們需要至少有一個測試去驗證使用真實依賴對象的產品。此外,要時刻注意我們是使用Test Double去代替待測系統的依賴對象而不是直接去代替待測系統的部分功能,不然我們就在測試一個“錯誤”的產品。

Test Double可以進一步細化為:

  • Test Stub
  • Test Spy
  • Mock Object
  • Fake Object
  • Dummy Object

它們各自的定義和區別是什么呢?這篇文章會解答這個問題。

Test Stub - you can define answers to me; I'll respond the same

Test Stub是指一個完全代替待測系統依賴組件的對象,這個對象按照我們設計的輸出與待測系統進行交互,可以理解是在待測系統內部打的一個樁。這個樁既不會與測試用例(代碼)交互,也不會在待測系統內部進行驗證。Test Stub常用于響應待測系統的請求,然后返回特定的值。接下來,這個值會對待測系統產生影響,然后我們就在測試用例里面去驗證這個影響。

Test Stub的實現方式一般有兩種:

  1. Hard-Coded Test Stub - 會返回固定response的Test Stub
  2. Configurable Test Stub - 會根據測試需求返回相應response的Test Stub,可配置化

當我們遇到下面場景時,Test Stub就可以派上用場

  • 依賴組件無法使用,影響測試結果
  • 依賴組件運行太慢,影響測試速度
  • 成為Responder響應者,當需要給待測系統注入特定數據,從而對待測系統產生影響
  • 成為Saboteur破壞者,當需要給待測系統注入無效數據,從而對待測系統產生異常影響,觀察待測系統如何處理錯誤情況

下面是python-doublex的Stub例子

from doublex import Stub, ANY_ARG, assert_that, is_

class Collaborator:
    def hello(self):
        return "hello"

    def add(self, a, b):
        return a + b

with Stub(Collaborator) as stub:
    stub.hello().raises(SomeException)
    stub.add(ANY_ARG).returns(4)

assert_that(stub.add(2,3), is_(4))

Mock Object - you can set your expectation on me

Mock Object是指一個完全代替待測系統依賴組件,并且用于驗證待測系統輸出的對象。這個對象接受待測系統的輸出,進行處理并且這個輸出進行驗證,一旦驗證通過也會返回值給待測系統。Mock Object主要用于接收待測系統的輸出,然后進行驗證。

Mock Object一個重要的特點是它可以對無法在待測系統上直接被觀察到的行為或輸出進行驗證。無法觀察到的系統行為或輸出可以是數據插入數據庫,可以是數據寫入文件,也可以是對其他組件的調用。以數據庫類型Mock Object舉例,這個Mock的數據庫會去接受待測系統發過來的數據,并且對這個數據進行驗證,一旦驗證通過就會對數據進行處理(插入或更新操作),然后測試代碼會去驗證插入是否成功。

下面是python-doublex的Mock例子

from doublex import Mock, assert_that, verify

with Mock() as smtp:
    smtp.helo()
    smtp.mail(ANY_ARG)
    smtp.rcpt("bill@apple.com")
    smtp.data(ANY_ARG).returns(True).times(2)

smtp.helo()
smtp.mail("poormen@home.net")
smtp.rcpt("bill@apple.com")
smtp.data("somebody there?")
smtp.data("I am afraid..")

assert_that(smtp, verify())

Fake Object - you can have me with limited capabilities

Fake Object是指一個輕量級的完全代替待測系統依賴組件的對象,采用更加簡單的方法實現依賴組件的功能。Fake Object可以是一個“fake DB”比如簡單的內存數據庫來代替真實的重量級的數據庫,也可以是一個“fake web service”比如創建一個簡單的web service來返回指定的response。

Fake ObjectTest Stub很類似,都是依賴組件的代替,區別就在于這個“輕量級”的定義。“輕量級”是指Fake Object僅僅提供和依賴組件一樣的功能接口保證待測系統正常工作,讓待測系統認為Fake Object就是“真的”依賴組件,實現細節可以非常簡單,不需要具有真實依賴組件的很多特性,也不需要像Test Stub那樣接受測試的需求,返回特定response給待測系統。

總之,Fake Object的實現比Test StubMock Object簡單,所以更加可以快速滿足測試需求。不過如果我們需要控制依賴組件對待測系統的輸入或輸出,我們應該使用Test StubMock Object

Test Spy - monitor real ones; you can change my behavior

Test Spy是指一個待測系統依賴組件的替身,并且會捕捉和保存待測對象對依賴系統的輸出,這個輸出會用于測試代碼中的驗證。Test Spy主要用于記錄和驗證待測對象對依賴系統的輸出。

那和Mock Object不同之處是什么呢?Test Spy是把待測對象對依賴系統的輸出拿到了測試代碼里面進行驗證,這樣的話,如果待測系統的輸出不符合期望,Test Spy并不像Mock Object那樣第一時間讓測試失敗,而是可以在測試代碼中加入更多判斷信息,讓驗證和測試結果更加可控和可視化

下面是python-doublex的Spy例子

from hamcrest import contains_string
from doublex import Spy, assert_that, called

class Sender:
    def say(self):
        return "hi"

    def send_mail(self, address, force=True):
        pass  # [some amazing code]

sender = Spy(Sender)

sender.send_mail("john.doe@example.net")  # right, Sender.send_mail interface support this

assert_that(sender.send_mail, called())
assert_that(sender.send_mail, called().with_args("john.doe@example.net"))
assert_that(sender.send_mail, called().with_args(contains_string("@example.net")))

sender.bar()  # interface mismatch exception

jasmine也支持Test Spy

describe("A spy", function() {
  var foo, bar = null;

  beforeEach(function() {
    foo = {
      setBar: function(value) {
        bar = value;
      }
    };

    spyOn(foo, 'setBar');

    foo.setBar(123);
    foo.setBar(456, 'another param');

  });

it("tracks that the spy was called", function() {
    expect(foo.setBar).toHaveBeenCalled();

  });

it("tracks that the spy was called x times", function() {
    expect(foo.setBar).toHaveBeenCalledTimes(2);

  });

it("tracks all the arguments of its calls", function() {
    expect(foo.setBar).toHaveBeenCalledWith(123);
    expect(foo.setBar).toHaveBeenCalledWith(456, 'another param');

  });

it("stops all execution on a function", function() {
    expect(bar).toBeNull();
  });
});

Dummy Object - pass around but never actually used

Dummy Object對象是指為了調用被測試方法而傳入的假參數,為什么說是假參數呢?實際上這些傳入的Dummy對象并不會對測試有任何作用,僅僅是為了成功調用被測試方法。所以,Dummy Object又被稱為Dummy parameter或placeholder。

比如有一個類的實例創建要求傳入多個參數,這些參數里面沒有可選參數,其中有幾個參數不會對測試產生任何作用,這時我們就可以創建Dummy對象作為假參數去創建這個實例。

模塊推薦

下面列出了一些可用的Test Double工具

Java
Python
  • doublex - Powerful test doubles framework for Python
  • mock - (Python standard library) A mocking and patching library
  • httpretty - HTTP request mock tool for Python.
JavaScript

總結

testdouble.png

參考

最后編輯于
?著作權歸作者所有,轉載或內容合作請聯系作者
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發布,文章內容僅代表作者本人觀點,簡書系信息發布平臺,僅提供信息存儲服務。
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 227,748評論 6 531
  • 序言:濱河連續發生了三起死亡事件,死亡現場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機,發現死者居然都...
    沈念sama閱讀 98,165評論 3 414
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 175,595評論 0 373
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 62,633評論 1 309
  • 正文 為了忘掉前任,我火速辦了婚禮,結果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當我...
    茶點故事閱讀 71,435評論 6 405
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發上,一...
    開封第一講書人閱讀 54,943評論 1 321
  • 那天,我揣著相機與錄音,去河邊找鬼。 笑死,一個胖子當著我的面吹牛,可吹牛的內容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 43,035評論 3 440
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 42,175評論 0 287
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當地人在樹林里發現了一具尸體,經...
    沈念sama閱讀 48,713評論 1 333
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 40,599評論 3 354
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發現自己被綠了。 大學時的朋友給我發了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 42,788評論 1 369
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,303評論 5 358
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質發生泄漏。R本人自食惡果不足惜,卻給世界環境...
    茶點故事閱讀 44,034評論 3 347
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 34,412評論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 35,664評論 1 280
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 51,408評論 3 390
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 47,747評論 2 370

推薦閱讀更多精彩內容

  • Spring Cloud為開發人員提供了快速構建分布式系統中一些常見模式的工具(例如配置管理,服務發現,斷路器,智...
    卡卡羅2017閱讀 134,778評論 18 139
  • 單元測試實踐背景 測試環境定位bug時,需要測試同學協助手動發起相關業務URL請求,開發進行遠程調試問題:1、遠程...
    Zeng_小洲閱讀 7,717評論 0 4
  • Mock 方法是單元測試中常見的一種技術,它的主要作用是模擬一些在應用中不容易構造或者比較復雜的對象,從而把測試與...
    熊熊要更努力閱讀 28,381評論 2 25
  • Martin Fowler的一篇文章。??Key point: two differences; SUT??'M...
    Luna_Lu閱讀 1,651評論 0 4
  • 此物最珍惜,自古不費財。 并非多難見,一日一念懷。 世人皆有之,卻是最難買。 待到散盡后,千金不復來。 (小兒作詩)
    芃悠閱讀 100評論 1 1