零公式講解統計學——ROC曲線

今天來聊聊ROC(Receiver Operator Characteristic)曲線。

在上一篇中我們介紹了靈敏度與特異度。在事實和檢測都只有兩種可能(疾病/非疾病,陰性/陽性)的情況下,這兩項指標都不難理解。但是如果檢測結果不只有陰性和陽性,還有其他的可能的話,就比較難辦了。

假設某種血液檢測,數值指標有1,2,3,4,5,五種可能。我們并不確定用大于等于哪個值來作為診斷癌癥的指標。

如果我們說檢測指標大于等于1就是患有癌癥,那么這項測試的靈敏度為100%,因為所有人都會被診斷為癌癥,我們不會錯過任何一個得癌癥的病人。但是這項測試的特異度為0,因為任何健康的人也會被診斷為癌癥。

對于用其他數值作為判斷癌癥的指標,假設該血液檢測的數值如下:

血液檢測1

舉例來說,如果我們說檢測指標大于等于2是患有癌癥,假設這項測試的靈敏度為96%,而特異度為39%。意思就是96%的癌癥患者會被檢測出來。在非癌癥患者中,有39%的人能被正確診斷出他們并不患有癌癥。

現在有另一個血液檢測,數值指標同樣有1,2,3,4,5,五種可能,特異度和靈敏度表格如下:

血液檢測2

請問,哪一種血液指標對于癌癥的判斷更好呢?

從表格中看,我們可以發現血液檢測1的特異度和靈敏度都比較高,說明血液檢測1比血液檢測2的檢測效果要好。但是如果數據很多,比較起來就很麻煩。有一種十分簡便方法,就是ROC曲線。

ROC曲線的橫軸為1減去特異度,而豎軸為靈敏度。ROC曲線直觀地表現了某種檢測,使用不同的數值來判斷疾病時,特異度和靈敏度之間的關系。將上述兩個表格的數據畫為ROC曲線,就會得到下面的這張圖:

ROC曲線

我們發現,血液檢測1的ROC曲線(紅線)在血液檢測2之上,那么就說明血液檢測1比較好。在看ROC曲線的時候,曲線越靠近左上角,也就是說靈敏度越高時特異值越低的檢測效果比較好。

如果有以下兩種檢測,他們的ROC曲線互相交叉的話,如何比較呢?

ROC曲線

這個時候可以利用AUC(Area Under Curve),即曲線下面積來比較兩種曲線的優劣。曲線下面積說的是,曲線和橫軸之間的面積。在上圖中,紅線的AUC為0.8,綠線的AUC為0.78。雖然兩種曲線有所交叉, 也就是說在某些情況下,綠線會比紅線好。但是總體來說,因為紅線的AUC比較高,所以檢測3會比檢測4更好。

ROC和AUC不僅僅在統計中被廣泛應用,在現在火熱的機器學習中也有著非常多的用途,但是其原理是一致的。簡單來說,ROC和AUC是一種十分直觀,用來比較不同檢測/模型的方法。

?著作權歸作者所有,轉載或內容合作請聯系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 227,572評論 6 531
  • 序言:濱河連續發生了三起死亡事件,死亡現場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機,發現死者居然都...
    沈念sama閱讀 98,071評論 3 414
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 175,409評論 0 373
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 62,569評論 1 307
  • 正文 為了忘掉前任,我火速辦了婚禮,結果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當我...
    茶點故事閱讀 71,360評論 6 404
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發上,一...
    開封第一講書人閱讀 54,895評論 1 321
  • 那天,我揣著相機與錄音,去河邊找鬼。 笑死,一個胖子當著我的面吹牛,可吹牛的內容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 42,979評論 3 440
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 42,123評論 0 286
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當地人在樹林里發現了一具尸體,經...
    沈念sama閱讀 48,643評論 1 333
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 40,559評論 3 354
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發現自己被綠了。 大學時的朋友給我發了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 42,742評論 1 369
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,250評論 5 356
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質發生泄漏。R本人自食惡果不足惜,卻給世界環境...
    茶點故事閱讀 43,981評論 3 346
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 34,363評論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 35,622評論 1 280
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 51,354評論 3 390
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 47,707評論 2 370

推薦閱讀更多精彩內容