Airflow教程-使用Airflow实现ETL调度
一、Airflow是什么 airflow 是一个编排、调度和监控workflow的平台，由Airbnb开源，现在在Apache Software Foundation 孵化。airflow 将workflow编排为由tasks组成的DAGs(有向无环图)，调度器在一组workers上按照指定 ...
原文：airflow使用本地时区
在airflow中使用的时间是utc时间，而更多时候我们希望的是使用本地时间，于是在定义airflow定时任务的时候，涉及到了时间的转换。 .python中本地时间和utc时间的转换 查看国内可用时区: 方式一: 修改配置文件airflow.conf使用操作系统时间 方式二: 参考链接: https: stackoverflow.com questions how do i convert lo ...
2018-06-25 21:52 0 3171 推荐指数：
相关推荐
修改ESXI时区为本地时区
ESXI服务器默认使用UTC时区如下图，下面来修改为本地时区。 1、从其他一台Linux主机拷贝一个 /usr/share/zoneinfo/Asia/Shanghai 文件到ESXI主机的数据卷目录(即存储虚拟机文件的那个目录，其他目录重启ESXI会被还原掉)。这里我提供一个 Asia ...
Airflow 入门及使用
Airflow 入门及使用 Airflow 入门及使用 什么是 Airflow？ Airflow 是一个使用 python 语言编写的 data pipeline 调度和监控工作流的平台。 Airflow 是通过 DAG（Directed acyclic graph ...
Airflow安装与使用
...
3.Airflow使用
1. airflow简介 2. 相关概念 2.1 服务进程 2.1.1. web server 2.1.2. scheduler 2.1.3. worker 2.1.4. celery flower 2.2 相关概念 2.2.1. dag ...
airflow使用及原理
Airflow 入门及使用 什么是 Airflow？ Airflow 是一个使用 python 语言编写的 data pipeline 调度和监控工作流的平台。 Airflow 是通过 DAG（Directed ...
airflow
教程：https://airflow.apache.org/docs/stable/index.html 官网： http://airflow.incubator.apache.org/index.html airflow源码：https://github.com/apache ...
Airflow笔记-MySqlOperator使用及conn配置
1. 依赖 MySqlOperator 的数据库交互通过 MySQLdb 模块来实现, 使用前需要安装相关依赖: 2. 使用 使用 MySqlOperator 执行sql任务的一个简单例子: 3. 参数 MySqlOperator 接收几个参数: sql: 待执行的sql ...