项目结构 模块 dolphinscheduler-ui 前端页面模块 dolphinscheduler-server 核心模块。包括master/worker等功能 dolphinscheduler-common 公共模块。公共方法或类 ...

系统架构设计 在对调度系统架构说明之前，我们先来认识一下调度系统常用的名词 1.名词解释 DAG： 全称Directed Acyclic Graph，简称DAG。工作流中的Task任务以有向无环图的形式组装起来，从入度为零的节点进行拓扑遍历，直到无后继节点为止。举例如下图： dag示例 ...

今天继续分析海豚调度的源码 上回分析的是dolphinscheduler-service模块zookeeper相关的代码 这回分析是dolphinscheduler-server模块zookeeper相关的代码 ZkMasterClient master服务zk客户端类 类继承的关系 ...

比azkaban、ooiz还要好的调度dolphinScheduler ...

配置docker的sudo权限 启动Spark集群 去容器内部配置 dolphin集群 附录说明 用户中心 物质基础-机器 参考 ...

1、DolphinScheduler简介 Apache DolphinScheduler](https://dolphinscheduler.apache.org/)（目前处在孵化阶段）是一个分布式、去中心化、易扩展的可视化DAG工作流任务调度系统， 其致力于解决数据处理流程中错综复杂 ...

海豚调度器（dolphinscheduler）的容错，如图： 容错有两种情况：一是启动第一个master的时候，该master节点扫描processInstance表里面正在还在执行状态的processInstance重新生成command命令，同时将该条processInstance记录 ...

先简单总结下MasterServier服务的启动流程： 初始化netty服务器，并启动 通过zookeeper客户端Curator创建一个znode临时节点 /dolphinscheduler/nodes/master/<ip>:<port>，如果主机 ...