创建与分配Executor的方式根据各种资源调度方式的不同而有差异，但拿到Executor后每种资源调度方式下的Executor的运作都一样，并由Executor完成最终的计算 ...

Shuffle是性能调优的重点，Shuffle是为了汇聚有共同特征的一类数据到一个计算节点上进行计算。 Shuffle过程非常复杂：数据量大、将数据汇聚到正确的Partitio ...

前言 在之前的文章.Net Core Configuration源码探究一文中我们曾解读过Configuration的工作原理，也在.Net Core Configuration Etcd数据源一文中探讨过为Configuration自定义数据源需要哪些操作 ...

数据库管理系统将数据存储在磁盘、磁带以及其他的裸设备上，虽然这些设备的访问速度相比内存慢很多，但其非易失性和大容量的特点使他们成为数据存储的不二之选。 本文主要讨论大型数据库产品的磁盘存储内部结构，这对于深入理解数据库各种数据结构具有至关重要的作用。 数据库磁盘存储的体系结构 以上两图 ...

记录一下 Laravel Storage 的常见用法 内容写入磁盘文件 文件默认创建在 /storage/app 目录下 获取文件存储的本地磁盘全路径 继续在 tinker 中测试一下 可见，应该是 storage_path('app/test.txt') 删除文件 文件 ...

一、第一部分 1、spark2.1与hadoop2.7.3集成，spark on yarn模式下，需要对hadoop的配置文件yarn-site.xml增加内容，如下： 2、spark的conf/spark-defaults.conf配置 ...

一、第一部分 1、spark2.1与hadoop2.7.3集成，spark on yarn模式下，需要对hadoop的配置文件yarn-site.xml增加内容，如下： 2、spark的conf/spark-defaults.conf配置 如果你是运行在yarn ...

可参考：https://d.laravel-china.org/docs/5.5/filesystem ...