設想一下，當你的系統引入了spark或者hadoop以后，基於Spark和Hadoop已經做了一些任務，比如一連串的Map Reduce任務，但是他們之間彼此右前后依賴的順序，因此你必須要等一個 ...

Spark是現在應用最廣泛的分布式計算框架，oozie支持在它的調度中執行spark。在我的日常工作中，一部分工作就是基於oozie維護好每天的spark離線任務，合理的設計工作流並分配適合的參數對於 ...

1. Hadoop常見調度框架： （1）Linux Crontab：Linux自帶的任務調度計划，在任務比較少的情況下，可以使用這種方式，直接執行腳本，例如添加一個執行計划： 0 12 * hive ...

Oozie執行Shell，傳入參數1. 新建一個workflow 2. 拖入一個shell 3. shell腳本如下 這是在命令行可執行的命令，其中有三個動態參 ...

Oozie執行Sqoop，傳入參數（注意，在使用--query時，參數中一定不要帶有空格，否則出錯）1. 新建一個workflow 2. 拖入一個sqoop 3. sqoop抽 ...

oozie中支持很多的action類型，比如spark、hive，對應的標簽為： <spark xmlns="uri:oozie:spark-action:0.1"> .. ...

繼前一篇大體上翻譯了Email的Action配置，本篇繼續看一下Shell的相關配置。 Shell Action Shell Action可以執行Shell腳本命令，工作流會等到shel ...

最近又開始捅咕上oozie了，所以回頭還是翻譯一下oozie的文檔。文檔里面最重要就屬這一章了——工作流定義。 一提到工作流，首先想到的應該是工作流都支持哪些工作依賴關系，比如串式的執行， ...

Oozie支持Java Action，因此可以自定義很多的功能。本篇就從理論和實踐兩方面介紹下Java Action的妙用，另外還涉及到oozie中action之間的參數傳遞。 本文大致分 ...

在大數據的當下，各種spark和hadoop的框架層出不窮。各種高端的計算框架，分布式任務如亂花般迷眼。你是否有這種困惑！——有了許多的分布式任務，但是每天需要固定時間跑任務，自己寫個調度，既不 ...