原文:【原創】大數據基礎之Azkaban(1)簡介、源代碼解析

Azkaban . 一 簡介 官網 https: azkaban.github.io Azkaban was implemented at LinkedIn to solve the problem of Hadoop job dependencies. We had jobs that needed to run in order, from ETL jobs to data analytics ...

2018-11-02 11:09 0 680 推薦指數:

查看詳情

原創大數據基礎之Oozie vs Azkaban

概括 Azkaban是一個非常輕量的開源調度框架,適合二次開發,但是無法直接用於生產環境,存在致命缺陷(比如AzkabanWebServer是單點,1年多時間沒有修復),在一些情景下的行為簡單粗暴(比如重啟AzkabanExecutorServer會導致該server上正在運行的所有流程fail ...

Fri Nov 02 19:12:00 CST 2018 0 808
原創大數據基礎之Kudu(1)簡介、安裝、使用

kudu 1.7 官方:https://kudu.apache.org/ 一 簡介 kudu有很多概念,有分布式文件系統(HDFS),有一致性算法(Zookeeper),有Table(Hive Table),有Tablet(Hive Table Partition),有列式存儲 ...

Mon Jan 21 20:45:00 CST 2019 1 1133
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM