Airflow的第一个DAG 考虑了很久,要不要记录airflow相关的东西, 应该怎么记录. 官方文档已经有比较详细的介绍了,还有各种博客,我需要有一份自己的笔记吗? 答案就从本文开始了. 本 ...

Airflow Console: https://github.com/Ryan-Miao/airflow-console Apache Airflow扩展组件, 可以辅助生成dag, 并存储到gi ...

Airflow自定义插件 Airflow之所以受欢迎的一个重要因素就是它的插件机制。Python成熟类库可以很方便的引入各种插件。在我们实际工作中，必然会遇到官方的一些插件不足够满足需求的时候。这时 ...

随着阿里入主饿了么，我们一个配送口碑外卖订单的客户，正在步入正轨，人员齐整，训练有素... 但，突然一下子失去的所有订单来源，没有订单，也就没有了收入，线上7，8个客服，线下近100个配送 ...

引子　　　 　 早上和往常一样去工商大学打球，除了今天三分比较准外，一切都还是那样的循规蹈矩。 　　 也许股子里还有那么一些不甘平庸，总想着能改变一下如此无趣的按部就班。 　　 转过行政楼 ...

今天远程检查医院上线的系统运行状况时，发现xxl-job调度系统在没有执行任务的情况下一直报错，如下图： 看这发生时间，每30秒一次，特别有规律，一开始以为是有任务在执行，因为参数是json格式 ...

引子　　　 　 坚持了20天，终于还是做了一个艰难的决定--把媳妇和娃送到了丈母娘家。 　　 前些时间，老妈有事儿回了四川，给了我和媳妇独自抚养娃的机会，我知道这将是一个巨大的挑战。 　　 ...

前文Airflow的第一个DAG已经跑起来了我们的第一个任务. 本文就来丰富这个任务. 回顾我们的任务内容 我们定义了DAG的名称为Hello-World, 这个叫dag_id, 补充 ...

联童科技是一家智能化母婴童产业平台，从事母婴童行业以及互联网技术多年，拥有丰富的母婴门店运营和系统开发经验，在会员经营和商品经营方面，能够围绕会员需求，深入场景，更贴近合作伙伴和消费者，提供最优服务产 ...

一、简述 Apache DolphinScheduler是一个分布式去中心化，易扩展的可视化DAG工作流任务调度系统。致力于解决数据处理流程中错综复杂的依赖关系，使调度系统在数据处理流程中开箱即用。 ...