原文:AirFlow简介

, 简介 Airflow是一个可编程,调度和监控的工作流平台,基于有向无环图 DAG ,airflow可以定义一组有依赖的任务,按照依赖依次执行。airflow提供了丰富的命令行工具用于系统管控,而其web管理界面同样也可以方便的管控调度任务,并且对任务运行状态进行实时监控,方便了系统的运维和管理。 ,执行器 Executor Airflow本身是一个综合平台,它兼容多种组件,所以在使用的时候有 ...

2018-08-19 20:05 0 46997 推荐指数:

查看详情

2.airflow参数简介

比较重要的参数: 参数 默认值 说明 airflow_home /home/airflow/airflow01 airflow home,由环境变量 ...

Thu Aug 31 08:13:00 CST 2017 0 4844
airflow

教程:https://airflow.apache.org/docs/stable/index.html 官网: http://airflow.incubator.apache.org/index.html airflow源码:https://github.com/apache ...

Thu Feb 08 00:05:00 CST 2018 0 6814
【原创】Airflow 简介&如何部署一个健壮的 apache-airflow 调度系统

声明 本文摘录了很多前辈的文章,原文如下: https://www.jianshu.com/p/2ecef979c606 Airflow 简介 Airflow是一个可编程,调度和监控的工作流平台,基于有向无环图(DAG),airflow可以定义一组有依赖的任务,按照依赖依次执行。airflow ...

Tue Nov 12 00:12:00 CST 2019 1 1186
airflow的安装

1.环境准备 1.1 安装环境 1.2 创建用户 2.安装airflow 2.1 安装python 2.2 安装pip 2.3 安装数据库 2.4 安装airflow 2.4.1 安装主模块 2.4.2 安装数据库模块、密码模块 ...

Fri Jan 12 18:13:00 CST 2018 0 1249
Airflow概念

DAGS(Directed Acyclic Graphs)[有向无环图] DAG是要运行的任务的一组集合, 反应了这些任务间的关系及依赖。 Operators and Tasks ...

Sat Apr 11 23:48:00 CST 2020 0 856
Airflow速用

Airflow是Apache用python编写的,用到了 flask框架及相关插件,rabbitmq,celery等(windows不兼容);、 主要实现的功能 编写 定时任务,及任务间的编排; 提供了web界面 可以手动触发任务,分析任务执行顺序,任务执行状态,任务代码,任务日志 ...

Thu Oct 31 00:46:00 CST 2019 0 329
安装airflow

1. 设置环境变量 2.pip install apache-airflow==1.10.5 3.修改airflow.cfg 配置 注释默认的DB 配置,设置为mysql DB url,在MySQL中 新建数据库 airflow 4. airflow initdb 如果报 ...

Sat Oct 12 23:02:00 CST 2019 0 364
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM