原文:【原创】大数据基础之Azkaban(1)简介、源代码解析

Azkaban . 一 简介 官网 https: azkaban.github.io Azkaban was implemented at LinkedIn to solve the problem of Hadoop job dependencies. We had jobs that needed to run in order, from ETL jobs to data analytics ...

2018-11-02 11:09 0 680 推荐指数:

查看详情

原创大数据基础之Oozie vs Azkaban

概括 Azkaban是一个非常轻量的开源调度框架,适合二次开发,但是无法直接用于生产环境,存在致命缺陷(比如AzkabanWebServer是单点,1年多时间没有修复),在一些情景下的行为简单粗暴(比如重启AzkabanExecutorServer会导致该server上正在运行的所有流程fail ...

Fri Nov 02 19:12:00 CST 2018 0 808
原创大数据基础之Kudu(1)简介、安装、使用

kudu 1.7 官方:https://kudu.apache.org/ 一 简介 kudu有很多概念,有分布式文件系统(HDFS),有一致性算法(Zookeeper),有Table(Hive Table),有Tablet(Hive Table Partition),有列式存储 ...

Mon Jan 21 20:45:00 CST 2019 1 1133
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM