Spark 經典論文筆記 Resilient Distributed Datasets : A Fault Tolerant Abstraction for In Memory Cluster Computing 為什么要設計spark 現在的計算框架如Map Reduce在大數據分析中被廣泛采用，為什么還要設計新的spark Map Reduce提供了高級接口可以方便快捷的調取計算資源，但是缺少 ...
2017-07-21 14:32 1 2080 推薦指數：
VM-FT 論文研讀 說明：本文為論文 《The Design of a Practical System for Fault-Tolerant Virtual Machines》 的個人理解，難免有理解不到位之處，歡迎交流與指正 。 論文地址：VM-FT 論文 本文的總結包括論文內容 ...
Hybrid computing using a neural network with dynamic external memory Nature 2016 updated on 2018-07-21 15:30:31 Paper：http ...
Spark的核心RDD（Resilient Distributed Datasets彈性分布式數據集） 鋪墊 在hadoop中一個獨立的計算，例如在一個迭代過程中，除可復制的文件系統（HDFS）外沒有提供其他存儲的概念，這就導致在網絡上進行數據復制而增加了大量的消耗，而對 ...
概述 lab2中實現了raft協議，本lab將在raft之上實現一個可容錯的k/v存儲服務，第一部分是實現一個不帶日志壓縮的版本，第二部分是實現日志壓縮。時間原因我只完成了第一部分。 設計思路 ...
6.824 Lab 3: Fault-tolerant Key/Value Service Due Part A: Mar 13 23:59 Due Part B: Apr 10 23:59 Introduction In this lab you will build ...
Part B: Key/value service with log compaction Do a git pull to get the latest lab software. As thi ...
Spark的核心RDD Resilient Distributed Datasets(彈性分布式數據集) Spark運行原理與RDD理論 Spark與MapReduce對比,MapReduce的計算和迭代是基於磁盤的,而Spark的迭代和計算是盡量基於內存 ...
好久不寫論文筆記了，不是沒看，而是很少看到好的或者說值得記的了，今天被xinlei這篇paper炸了出來，這篇被據老大說xinlei自稱idea of the year，所以看的時候還是很認真的，然后最后確實也發現了不少干貨。 一、introduction 這篇文章主要還是解決 ...
