GDAL+scikit-learn 遙感定量回歸模型

(轉(zhuǎn)載請?jiān)陲@著位置注明本人微信公眾號stdrei)

Python是目前最流行的機(jī)器學(xué)習(xí)工具之一,有很多開源的工具包可以使用。超越R語言,Python成為最受歡迎的機(jī)器學(xué)習(xí)語言

在過去4年,Python 機(jī)器學(xué)習(xí)職位」上升趨勢和與R的對比。

圖片轉(zhuǎn)自機(jī)器之心原文

因而,掌握Python語言,并將其用于遙感數(shù)據(jù)處理和定量反演,應(yīng)該會是不錯(cuò)的。下面先介紹下GDAL,然后通過一個(gè)簡單的例子實(shí)現(xiàn)在有地面采樣值時(shí)構(gòu)建遙感影像的回歸模型。

GDAL(Geospatial Data Abstraction Library)是一個(gè)操作各種柵格地理數(shù)據(jù)格式的庫。包括讀取、寫入、轉(zhuǎn)換、處理各種柵格數(shù)據(jù)格式(有些特定的格式對一些操作如寫入等不支持)。它使用了一個(gè)單一的抽象數(shù)據(jù)模型就支持了大多數(shù)的柵格數(shù)據(jù)(GIS對柵格,矢量,3D數(shù)據(jù)模型的抽象能力實(shí)在令人嘆服)。當(dāng)然除了柵格操作,這個(gè)庫還同時(shí)包括了操作矢量數(shù)據(jù)的另一個(gè)有名的庫ogr(ogr這個(gè)庫另外介紹),這樣這個(gè)庫就同時(shí)具備了操作柵格和矢量數(shù)據(jù)的能力。


接觸遙感和GIS的,對GDAL這個(gè)庫應(yīng)該都不陌生,即時(shí)沒上手用過,但也一定聽過。有很多著名的GIS軟件都使用了GDAL/OGR庫, 包括商業(yè)公司ESRI的ArgGIS,Google的Google Earth和開源的GRASS GIS系統(tǒng)。 GDAL/OGR支持多種操作系統(tǒng),可以同時(shí)對Linux和windows下的地理空間數(shù)據(jù)管理系統(tǒng)提供百余種矢量和柵格文件類型的支持。


python版的GDAL和其他的python庫結(jié)合的很好,最直接、明顯的支持是使用Numeric庫來進(jìn)行數(shù)據(jù)讀取和操作。各種矩陣魔術(shù)可以發(fā)揮得淋漓盡致(圖像其實(shí)就是矩陣)。

1. 獲取數(shù)據(jù)

根據(jù)采樣點(diǎn)坐標(biāo),利用QGIS或ArcGIS矢柵計(jì)算,得到每個(gè)采樣點(diǎn)對應(yīng)的遙感像素及其在不同波段的數(shù)值。

比如,在本例子中用到的數(shù)據(jù),遙感每個(gè)pixel對應(yīng)的值:


Landsat波段

采樣值:


采樣值

2. GDAL讀取遙感數(shù)據(jù)

GDAL是由C++開發(fā)的,直接封裝的python接口,用起來會多少有些別扭。在此基礎(chǔ)上,Mapbox又開發(fā)了Rasterio的工具包,用起來更方便,更pythonic。不過,在本文中還是直接用GDAL。

Rasterio is a GDAL and Numpy-based Python library designed to make your work with geospatial raster data more productive, more fun — more Zen. It’s a new open source project from the satellite team at Mapbox.

import osgeo.gdal as gdal

driver = gdal.GetDriverByName('ENVI')
driver.Register()
raster = gdal.Open(filePath,gdal.GA_ReadOnly)
raster_array = raster.ReadAsArray()

遙感數(shù)據(jù)使用Landsat5數(shù)據(jù),一共七個(gè)波段,顯示第一個(gè)波段的圖像

imshow(raster_array[0])
Paste_Image.png

3. Scikit-Learn構(gòu)建簡單線性模型

用python的,對Scikit-Learn這個(gè)機(jī)器學(xué)習(xí)包應(yīng)該不陌生,提供了從預(yù)處理到監(jiān)督學(xué)習(xí)非監(jiān)督學(xué)習(xí)的算法,并且可以進(jìn)行網(wǎng)格調(diào)參和Pipline。對Pandas的Dataframe也非常友好。

線性模型是最簡單,也是最方便有用的工具了。

from sklearn import linear_model

clf = linear_model.LinearRegression()
clf.fit(bands,moist)

模型的參數(shù)

clf.coef_

輸出:

array([[-0.00321884,  0.02964046, -0.01374858,  0.00107655, -0.00228321,
        -0.00152347,  0.00388506]])`
clf.score(bands,moist)

輸出:

0.23889843856396475

(⊙o⊙)?R2才這么點(diǎn)。。。

這只是個(gè)例子而已,重要的是過程,能夠充分利用Python機(jī)器學(xué)習(xí)生態(tài)圈中的豐富的工具包用于遙感等空間數(shù)據(jù)處理中。

4. 模型應(yīng)用

首先需要對遙感圖像的矩陣進(jìn)行變換,每個(gè)pixel的數(shù)據(jù)變?yōu)橐恍杏涗洠@樣才可以直接用Sklearn的模型預(yù)測每個(gè)pixel上的采樣值。直接用predict()方法,就可以根據(jù)將構(gòu)建的模型應(yīng)用于每個(gè)pixel上了。

b,w,h = shape(raster_array)
TMdata=raster_array.reshape(b,(w*h)).T
shape(TMdata)

(196L, 7L)

TM_predict=clf.predict(TMdata)

imshow(TM_predict.reshape(w,h))
plt.colorbar()
輸出結(jié)果

5. 代碼和示例數(shù)據(jù)下載

壓縮包列表

百度網(wǎng)盤下載鏈接:http://pan.baidu.com/s/1skJtePJ 密碼,請關(guān)注個(gè)人微信公眾號,在公眾號內(nèi)回復(fù)gdalsklearn獲取。

歡迎關(guān)注微信公眾號
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 227,702評論 6 531
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 98,143評論 3 415
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 175,553評論 0 373
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經(jīng)常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 62,620評論 1 307
  • 正文 為了忘掉前任,我火速辦了婚禮,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 71,416評論 6 405
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 54,940評論 1 321
  • 那天,我揣著相機(jī)與錄音,去河邊找鬼。 笑死,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 43,024評論 3 440
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 42,170評論 0 287
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個(gè)月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 48,709評論 1 333
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 40,597評論 3 354
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 42,784評論 1 369
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,291評論 5 357
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 44,029評論 3 347
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 34,407評論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 35,663評論 1 280
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 51,403評論 3 390
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 47,746評論 2 370

推薦閱讀更多精彩內(nèi)容