原文:MaxCompute执行引擎核心技术DAG揭秘

简介:作为业界少有的EB级数据分布式平台,MaxCompute每天支撑上千万个分布式作业的运行。这些作业特点各异,既有包含数十万计算节点的超大型作业,也有中小规模的分布式作业。不同用户对于不同规模 特点的作业,在运行时间,资源使用效率,数据吞吐率等方面,也有着不同的期待。DAG作为MaxCompute执行引擎的核心技术之一,在提供了底层统一的动态执行框架的同时,实现了一个在离线混合的执行模式 B ...

2021-08-24 11:08 0 181 推荐指数:

查看详情

构建企业数字化转型之某大厂审批流引擎核心技术揭秘

1. 定义 企业数字化转型的道路上,必不可少的一项就是审批流程的线上化,都需要搭建自己的审批系统,而审批系统的核心就是审批流引擎 什么是审批流引擎呢? 是一个工具包,用来驱动审批类业务的执行,通过使用这个引擎,可以方便快速的实现各类审批相关的功能,如:审批、同意、或签、并签、串签、拒绝、驳回 ...

Fri Jan 21 00:10:00 CST 2022 3 1499
揭秘有状态服务上 Kubernetes 的核心技术

背景 随着 Kubernetes 成为云原生的最热门的解决方案,越来越多的传统服务从虚拟机、物理机迁移到 Kubernetes,各云厂商如腾讯自研上云也主推业务通过Kubernetes来部署服务,享 ...

Fri Jun 04 22:30:00 CST 2021 0 1660
今日头条核心技术“个性推荐算法”揭秘

今日头条核心技术“个性推荐算法”揭秘 最近面试华兴资本, 他们比较关注今日头条算法的实现, 今天特转载网上 今日头条算法解密   【IT168 评论】互联网给用户带来了大量的信息,满足了用户在信息时代对信息的需求,也使得用户在面对大量信息时无法 ...

Sat Nov 19 05:51:00 CST 2016 0 4086
今日头条核心技术“个性推荐算法”揭秘

【IT168 评论】互联网给用户带来了大量的信息,满足了用户在信息时代对信息的需求,也使得用户在面对大量信息时无法从中获得对自己真正有用的那部分信息,对信息的使用效率反而降低了,而通常解决这个问题最常 ...

Wed Nov 29 05:38:00 CST 2017 0 7911
揭秘区块链的核心技术之「哈希与加密算法 」

大家都知道,区块链的关键技术组成主要为:P2P网络协议、共识机制、密码学技术、账户与存储模型。而这些技术中,又以 密码学与共识机制 这两点为最核心。那么今天我们来详细的聊一聊密码学,看一看密码学技术是如何在区块链中应用的。 首先,我们需知道区块链中用到的密码学算法 ...

Wed Aug 15 01:47:00 CST 2018 0 5967
今日头条核心技术“个性推荐算法”揭秘

【IT168 评论】互联网给用户带来了大量的信息,满足了用户在信息时代对信息的需求,也使得用户在面对大量信息时无法从中获得对自己真正有用的那部分信息,对信息的使用效率反而降低了,而通常解决这个问题最常 ...

Fri Oct 21 00:42:00 CST 2016 0 8412
Spring 核心技术(1)

接上篇:Spring 框架概述 version 5.1.8.RELEASE 这部分参考文档涵盖了 Spring Framework 所有绝对不可或缺的技术。 其中最重要的是 Spring Framework 的控制反转(IoC)容器。在介绍完 Spring 框架的 IoC ...

Wed Jun 26 20:00:00 CST 2019 0 496
Spring 核心技术(5)

接上篇:Spring 核心技术(4) version 5.1.8.RELEASE 1.4.5 自动装配协作者 Spring 容器可以自动连接协作 bean 之间的关系。你可以让 Spring 通过检查 ApplicationContext 中的内容自动为 bean 解析 ...

Thu Aug 01 20:22:00 CST 2019 0 480
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM