什么是capacity scheduler Capacity Scheduler调度器以队列为单位划分资源。简单通俗点来说，就是一个个队列有独立的资源，队列的结构和资源是可以进行配置的，如下图： default队列占30%资源，analyst和dev分别占40%和30%资源；类似 ...

一. yarn的资源分配模型 无论先进先出调度器，容量调度器，还是公平调度器，他们的核心：资源分配模型是一样的。 调度器维护着多个队列的信息，用户可以向任意一个或多个队列提交job。每次NodeManager向ResourceManager发送心跳时，调度器都会选择一个队列，再在队列 ...

线程调度器选择优先级最高的线程运行，但是，如果发生以下情况，就会终止线 程的运行： 1、线程体中调用了 yield 方法让出了对 cpu 的占用权利 2、线程体中调用了 sleep 方法使线程进入睡眠状态 3、线程由于 IO 操作受到阻塞 4、另外一个更高优先级线程 ...

1.目前etl的fetch task策略是基于任务子孙任务数和任务优先级获得task list 2.然后遍历task list 查看任务是否具备执行条件 集群资源校验（yarn/hdfs）<如果这里有性能瓶颈，可以抽出来做公共接口map，每10s更新一次> 数据是否准备好 ...

的使用体验。内核中安排进程执行的模块称为调度器（scheduler）。这里将介绍调度器的工作方式。 进程 ...

前言： 大部分情况下，kubernetes中的Pod只是容器的载体，通过Deployment、DaemonSet、RC、Job、Cronjob等对象来完成一组Pod的调度与自动控制功能。 Pod调度是由Scheduler组件完成的，可见图中位置。 Scheduler工作原理 pod创建流程 ...

首先在k8s中，k8s会根据每个work节点的配置，负载差异，自动生成优选函数，根据优选函数，当master节点分配下来任务时，将pod分配带最适合运行的node节点上。 之外我们技术人员还有以下三种方式去影响我们的pod调度， 1. node节点调度器 2. 亲和性调度 3. 污点容忍度 ...

Scuedulor是K8s的调度器 sheduler 是作为单独的程序运行的，启动之后会一直坚挺 API Server，获取 PodSpec.NodeName为空的 pod，对每个 pod 都会创建一个 binding，表明该 pod 应该放到哪个节点 ...