視頻去抖動

一.? 視頻穩像

視頻去抖動,也叫視頻穩像(Video Stabilization)。視頻穩像系統的重點在于基于視頻系列的運動估計,其中包括全局運動估計和局部運動估計。因此,根據運動估計的方法不同,視頻穩像的算法也是不同的。

視頻穩像的算法一般可以分為四大類:

1. 塊匹配法:目前視頻穩像系統中最常用的一種算法。該方法將當前幀分成塊,塊內的每個像素都具有同一運動矢量,然后對每一塊都在參考幀的特定范圍內搜索最佳匹配,從而估計出視頻序列的全局運動矢量。

2. 投影法:一般是利用圖像的灰度分布信息進行全局運動信息的估計。

3. 特征法:將一副圖像分割為幾個區域,在每個區域內選擇一定數量的代表點進行匹配。

4. 光流法:依據時域空間圖像亮度梯度來進行光流場的估計,它是在假設整個圖像的灰度是連續變化的前提下進行的。

其中,投影法的效果是最差的。因為單純的灰度分布不能很好的反映出運動量的變化。經過測試,發現基于光流法的方法是最好的。

二. 基于光流法的視頻穩像

下面是計算光流法的視頻去抖動算法的基本步驟:

1. 計算變換矩陣

a.? Get previous to current frame transformation (dx, dy, da) for all frames

???? 主要是利用cv2.goodFeaturesToTrack的good feature來計算這個偏移量。

b.? Accumulate the transformations to get the image trajectory

c.? Smooth out the trajectory using an averaging window

d.? Generate new set of previous to current transform, such that the trajectory ends up being the same as the smoothed trajectory vector

2. 將變換矩陣應用在視頻上

3. 一般的算法到這里就結束了。但是出現的視頻是有黑邊的。所以,要進行裁剪。

??? 裁剪的測略就是要遍歷一邊處理后的視頻,然后取所有幀的公共區域。公共區域做成一個mask,然后求這個mask的

??? 最大內接矩形并且該矩形的寬和高要平行于視頻的寬和高。

4. 將這個mask套在處理后的視頻上。

三. 可比較的視頻穩像算法來源

1. Joint Video Stitching and Stabilization from Moving Cameras

Heng Guo, Shuaicheng Liu, Tong He, Shuyuan Zhu, Bing Zeng, Moncef Gabbouj.

IEEE Transactions on Image Processing (TIP), vol. 25, no. 11, pp. 5491-5503, 2016.

2. Youtu的video stabilization。上傳視頻到youtube,然后調用其接口對視頻進行穩像,然后下載下來。網上有講解內部算法怎么做的。

??? https://www.youtube.com/watch?v=QdXugkXBTbc

3.? Adobe的After effect的視頻穩定化插件。

4. VirtualDub的deshaker filter。

?著作權歸作者所有,轉載或內容合作請聯系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 227,488評論 6 531
  • 序言:濱河連續發生了三起死亡事件,死亡現場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機,發現死者居然都...
    沈念sama閱讀 98,034評論 3 414
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 175,327評論 0 373
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 62,554評論 1 307
  • 正文 為了忘掉前任,我火速辦了婚禮,結果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當我...
    茶點故事閱讀 71,337評論 6 404
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發上,一...
    開封第一講書人閱讀 54,883評論 1 321
  • 那天,我揣著相機與錄音,去河邊找鬼。 笑死,一個胖子當著我的面吹牛,可吹牛的內容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 42,975評論 3 439
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 42,114評論 0 286
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當地人在樹林里發現了一具尸體,經...
    沈念sama閱讀 48,625評論 1 332
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 40,555評論 3 354
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發現自己被綠了。 大學時的朋友給我發了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 42,737評論 1 369
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,244評論 5 355
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質發生泄漏。R本人自食惡果不足惜,卻給世界環境...
    茶點故事閱讀 43,973評論 3 345
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 34,362評論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 35,615評論 1 280
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 51,343評論 3 390
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 47,699評論 2 370

推薦閱讀更多精彩內容

  • 每次畫水彩,心里都沒底兒,不知道自己能畫成什么樣,總覺得掌握不好水彩的技巧,明暗交替過渡都沒有素描那樣易掌握,描多...
    格Y調閱讀 1,292評論 14 39
  • 以前也關注過思維導圖和簡筆畫這兩件事,買過思維導圖和簡筆畫的書,工作上也是按照這個思路去考慮問題,但是基本上沒有動...
    Vivian_9888閱讀 2,879評論 0 2
  • 連續的忙碌了近三個月了,說忙碌的意思是忙的沒有認真的對待成長這件最重要的事。為什么最重要的事不做,你還在忙什么呢?...
    璀璨如域閱讀 281評論 0 0