Spark存储体系
作为分布式应用，Spark的数据存储在不同机器上。这就涉及到数据的传输，元数据的管理等内容。而且由于Spark可以利用内存和磁盘作为存储介质，这还涉及到了内存和磁盘的数据管理。 Spark存储体系架构 Spark存储（主要由BlockManager来完成）主要完成了写入数据块，如果需要备份 ...
原文：GPU体系架构(二)：GPU存储体系
GPU是一个外围设备，本来是专门作为图形渲染使用的，但是随着其功能的越来越强大，GPU也逐渐成为继CPU之后的又一计算核心。但不同于CPU的架构设计，GPU的架构从一开始就更倾向于图形渲染和大规模数据的并行计算处理。而大规模的并行计算，离不开大规模的数据传输，只有深入了解了GPU的存储体系，才能真正发挥GPU的威力，写出高性能的软件产品。但是由于GPU存储体系相关的资料非常少，加之非常分散，所以在 ...
2019-06-14 16:13 2 1554 推荐指数：
相关推荐
GPU体系架构(一)：数据的并行处理
最近在了解GPU架构这方面的内容，由于资料零零散散，所以准备写两篇博客整理一下。GPU的架构复杂无比，这两篇文章也是从宏观的层面去一窥GPU的工作原理罢了 GPU根据厂商的不同，显卡型号的不同，GPU的架构也有差别，但是大体的设计基本相同，原理的部分也是相通的。下面我们就以NVIDIA ...
分层存储体系结构
为什么需要分层存储？因为我们想要存储又大又快，但是只用一层存储无法达到目的，所以我们采用多层存储让那些越大越慢的数据距离处理器远一些，并确保处理器需要的大多数数据存储在更快的层中。 分层存储的基本原则 局部性原理 最近使用的代码或者数据很有可能在不久的将来继续用到。 局部性原理分为 ...
计算机分级存储体系
接近CPU的存储器容量更小、速度更快、成本更高，辅存容量大、速度慢，价格低。采用分级存储体系的目的是解决存储的容量、价格和速度之间的矛盾。 ...
spark 源码分析之十八 -- Spark存储体系剖析
本篇文章主要剖析BlockManager相关的类以及总结Spark底层存储体系。 总述 先看 BlockManager相关类之间的关系如下： 我们从NettyRpcEnv 开始，做一下简单说明。 NettyRpcEnv是Spark 的默认的RpcEnv实现，它提供了个Spark ...
计算机中存储体系的设计
概述 在计算机运行过程中,存储器是各种信息存储和交换的中心，而计算机所有存储器所构成的存储系统更是整个计算机系统的核心组成部分。在一台计算机中通常有多个存储器：主存储器、Cache、通用寄存器、磁盘寄存器、各种缓冲存储器、光盘存储器等。 为了评定不同存储器的性能差异，人们制定了一些主要 ...
CPU的基本原理与存储体系,及其对设计系统的影响
的核心部件。中央处理器主要包括两个部分，即 控制器、 运算器，其中还包括 高速缓冲存储器及实现它 ...
剖析虚幻渲染体系（12）- 移动端专题Part 2（GPU架构和机制）
目录 12.4 移动渲染技术要点 12.4.1 Tile-based (Deferred) Rendering 12.4.2 Hierarchical ...