PrestoSQL（trinodb）源码分析 - 执行（上）
SqlTaskManager Worker的SqlTaskManager负责接收发来的TaskRequest， doUpdateTask Get或创建SqlTask，仅仅新的Task需要创建 ...
原文：PrestoSQL（trinodb）源码分析 -优化和调度
通过TpchQueryRunner可以跑起来一个测试服务 仍然使用 SELECT SUPPKEY, sum QUANTITY from lineitem where QUANTITY gt group by SUPPKEY limit Mac M , Java CLI有bug，可以用python替代 SqlQueryExecution 前面的流程忽略，直接到SqlQueryExecution st ...
2021-11-25 14:56 1 1462 推荐指数：
相关推荐
PrestoSQL（trinodb）源码分析 - 执行（下）
TaskExecutor 那么都准备好了，就要开始真正的执行了 初始化的时候 增加TaskRunner线程 TaskRunner 核心就是不断的从waitingSplits ...
scheduler源码分析——调度流程
前言 当api-server处理完一个pod的创建请求后，此时可以通过kubectl把pod get出来，但是pod的状态是Pending。在这个Pod能运行在节点上之前，它还需要经过scheduler的调度，为这个pod选择合适的节点运行。调度的整理流程如下图所示 本篇阅读源码版本 ...
海豚调度DolphinScheduler源码分析（一）
系统架构设计 在对调度系统架构说明之前，我们先来认识一下调度系统常用的名词 1.名词解释 DAG： 全称Directed Acyclic Graph，简称DAG。工作流中的Task任务以有向无环图的形式组装起来，从入度为零的节点进行拓扑遍历，直到无后继节点为止。举例如下图： dag示例 ...
海豚调度Dolphinscheduler源码分析（三）
今天继续分析海豚调度的源码 上回分析的是dolphinscheduler-service模块zookeeper相关的代码 这回分析是dolphinscheduler-server模块zookeeper相关的代码 ZkMasterClient master服务zk客户端类 类继承的关系 ...
skynet源码分析3：消息调度
从四个方面来说: 1、消息发送 2、工作线程控制 3、信箱调度 4、消息分发 与调度相关的代码实现在/skynet-src/skynet_mq.c,/skynet-src/skynet_start.c,/skynet-src/skynet_server.c三个文件中，整体 ...
海豚调度Dolphinscheduler源码分析（二）
项目结构 模块 dolphinscheduler-ui 前端页面模块 dolphinscheduler-server 核心模块。包括master/worker等功能 dolphins ...
【Yarn源码分析】FairScheduler资源调度
一、Yarn 资源调度方式 资源调度方式确定了当任务提交到集群，如何为其分配资源执行任务。在 FairScheduler 中提供了两种资源调度方式：心跳调度和连续调度。 心跳调度方式：NodeManager 向 ResourceManager 汇报了自身资源情况（比如，当前可用资源，正在 ...