airflow一般以rabbitMQ或redis作为broker，rabbitMQ安装比较复杂，故本次选了redis redis常用命令 ...

一、Python环境安装 airflow依赖Python3，所以安装之前需要保证服务器有Python环境 #systemctl自启动报错解决#Q:No such file or directory: 'airflow': 'airflow'#A:将python3 ...

airflow是一个常驻任务，我们希望它在任务失败后可以自动重启，systemd可以帮助我们实现这个功能，首先需要配置如下文件 /etc/sysconfig/airflow /usr/lib/systemd/system/airflow ...

前面三步做完以后，就可以配置airflow的环境变量了 在此之前，可能需要先安装下依赖包 之后切换到python36 找到airflow的安装目录，配置到环境变量 这个时候在/root/airflow下就会出现airflow.cfg文件，作如下修改 ...

Airflow v2.0 分布式部署 elasticsearch日志解决方案 安装环境： docker airflow v2.0 elasticsearch 7+ filebeat 7+ 开发依赖： pip install ...

很多时候我们会有延时处理一个任务的需求，比如说： 2个小时后给用户发送短信。 15分钟后关闭网络连接。 2分钟后再次尝试回调。 下面我们来分别探讨一下几种实现方案： Java中 ...

分布式部署 目录 什么是分布式系统... 1 为何需要分布式... 1 分布式系统的特点... 1 分布式系统的缺点... 2 什么是分布式部署... 2 什么是分布式架构... 2 架构师需要懂部署吗... 2 架构分布式系统的常见关注点... 2 分布式架构部署的演变 ...

一：分布式架构和部署 1：如何进行分布式部署2：系统拆分后，模块之间如何相互调用3：如何进行统一的会话(Session)管理4：如何实现单点登录5：如何保证一致性更新6：如何规划和处理分布式事务7：如何对重要服务实现HA二：高并发和Web层的性能优化1：高并发的处理2：Nginx的优化 ...