oozie client命令調(diào)度

oozie分為bundle,coordinator,workflow三種方式,這里主要介紹下coordinator和workflow

查看coordinator運(yùn)行狀態(tài)
oozie job -oozie http://abc.com/oozie/ -info 0015847-150916101131329-oozie-C@1

如果一個(gè)coordinator有多個(gè)依賴,并且都沒(méi)有執(zhí)行,那么-info只會(huì)返回第一個(gè)依賴,也就是該coordinator沒(méi)執(zhí)行的原因可能并不是由一個(gè)依賴沒(méi)執(zhí)行完導(dǎo)致的,需要反復(fù)check

掛起某個(gè)workflow任務(wù)
oozie job -oozie http://abc.com/oozie/ -suspend 0000045-160304180859088-oozie-W
恢復(fù)某個(gè)掛起的workflow任務(wù)
oozie job -oozie http://abc.com/oozie/ -resume 0000045-160304180859088-oozie-W
重新run一個(gè)coordinator中的某個(gè)任務(wù)

可以有多種方法指定重跑的任務(wù),這里介紹兩個(gè),一個(gè)是按照action id來(lái)重跑,一個(gè)是按時(shí)間的range來(lái)重跑

按照action id 重跑
oozie job -oozie http://abc.com/oozie/ -config job.properties -rerun 0043299-150916101131329-oozie-C  -action 1

通過(guò)-config指定oozie的properties(一般是固定的,就是提交oozie代碼的時(shí)候設(shè)定的config目錄),-action后面指定action id

還可以同時(shí)指定多個(gè)action id在一次請(qǐng)求中:

oozie job -oozie http://abc.com/oozie -config job.properties -rerun 0000161-160506030003242-oozie-C  -action 1,2,3

如果coordinator有依賴job的話,通常上面兩種rerun方法都不能刷新依賴的狀態(tài),如果某個(gè)coordinator有一個(gè)依賴條件是某個(gè)hive db partition,假設(shè)本來(lái)這個(gè)partition存在,在rerun之前把partition刪除了,那么rerun還是能繼續(xù)執(zhí)行,并不會(huì)理會(huì)這個(gè)依賴條件其實(shí)已經(jīng)不滿足了,這樣最終會(huì)導(dǎo)致運(yùn)算出錯(cuò),所以oozie rerun里有一個(gè)參數(shù)是“-refresh”,保證rerun的時(shí)候重新去檢查一下依賴條件的狀態(tài),看看是否能滿足執(zhí)行的條件,如:

oozie job -oozie http://abc.com/oozie -config job.properties -rerun 0000161-160506030003242-oozie-C  -refresh -action 1,2,3
按照時(shí)間的range重跑
 oozie job -oozie http://abc.com/oozie/ -config job.properties -rerun 0065107-150916101131329-oozie-C -date 2016-02-20T00:10+0800::2016-02-21T14:00+0800

通過(guò)“-date”來(lái)指定時(shí)間的range,注意時(shí)間的格式是“xxxx-xx-xxTxx:xx+0800::xxxx-xx-xx”,“T”不能少,“0800”指定的是市區(qū),中國(guó)處于東八區(qū),所以是0800,兩個(gè)時(shí)間之間用“::”符號(hào)連接,這里詳細(xì)說(shuō)明下時(shí)間范圍的含義:

假設(shè)job是每天13點(diǎn)開(kāi)始跑,那么:

  • 2016-02-20T00:10+0800::2016-02-21T14:00+0800 => 會(huì)運(yùn)行20,21號(hào)的任務(wù),因?yàn)閑nd time 超過(guò)了21號(hào)13:00
  • 2016-02-20T00:10+0800::2016-02-21T10:00+0800 => 只會(huì)運(yùn)行20號(hào)的任務(wù),因?yàn)閑nd time 沒(méi)有超過(guò)了21號(hào)13:00

總之,就是取一個(gè)閉區(qū)間,執(zhí)行這個(gè)區(qū)間內(nèi)所有本該運(yùn)行的任務(wù):
[Begin_time, End_time]

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡(jiǎn)書系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 228,030評(píng)論 6 531
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡,警方通過(guò)查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 98,310評(píng)論 3 415
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái),“玉大人,你說(shuō)我怎么就攤上這事。” “怎么了?”我有些...
    開(kāi)封第一講書人閱讀 175,951評(píng)論 0 373
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)。 經(jīng)常有香客問(wèn)我,道長(zhǎng),這世上最難降的妖魔是什么? 我笑而不...
    開(kāi)封第一講書人閱讀 62,796評(píng)論 1 309
  • 正文 為了忘掉前任,我火速辦了婚禮,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 71,566評(píng)論 6 407
  • 文/花漫 我一把揭開(kāi)白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上,一...
    開(kāi)封第一講書人閱讀 55,055評(píng)論 1 322
  • 那天,我揣著相機(jī)與錄音,去河邊找鬼。 笑死,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 43,142評(píng)論 3 440
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來(lái)了?” 一聲冷哼從身側(cè)響起,我...
    開(kāi)封第一講書人閱讀 42,303評(píng)論 0 288
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒(méi)想到半個(gè)月后,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 48,799評(píng)論 1 333
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 40,683評(píng)論 3 354
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 42,899評(píng)論 1 369
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,409評(píng)論 5 358
  • 正文 年R本政府宣布,位于F島的核電站,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 44,135評(píng)論 3 347
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開(kāi)封第一講書人閱讀 34,520評(píng)論 0 26
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)。三九已至,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開(kāi)封第一講書人閱讀 35,757評(píng)論 1 282
  • 我被黑心中介騙來(lái)泰國(guó)打工, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 51,528評(píng)論 3 390
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 47,844評(píng)論 2 372

推薦閱讀更多精彩內(nèi)容