原文:【原创】大数据基础之Oozie vs Azkaban

概括 Azkaban是一个非常轻量的开源调度框架,适合二次开发,但是无法直接用于生产环境,存在致命缺陷 比如AzkabanWebServer是单点, 年多时间没有修复 ,在一些情景下的行为简单粗暴 比如重启AzkabanExecutorServer会导致该server上正在运行的所有流程fail ,很多时候需要人工干预,要达到生产环境的可靠性级别,至少大量二次开发,并且官方代码更新很快,合并代码有 ...

2018-11-02 11:12 0 808 推荐指数:

查看详情

大数据基础---Azkaban_Flow_2.0_的使用

一、Flow 2.0 简介 1.1 Flow 2.0 的产生 Azkaban 目前同时支持 Flow 1.0 和 Flow2.0 ,但是官方文档上更推荐使用 Flow 2.0,因为 Flow 1.0 会在将来的版本被移除。Flow 2.0 的主要设计思想是提供 1.0 所没有的流级定义。用户 ...

Tue Jun 30 00:12:00 CST 2020 0 830
原创大数据基础之调度框架

常见调度框架实现方式 开源 Oozie 成熟稳定可靠,可直接用于生产环境 Azkaban 单点、简单粗暴,有两套独立的调度实现,必须二次开发才可用 ...

Thu Dec 13 01:52:00 CST 2018 0 1164
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM