十分鍾了解分布式計算:GraphX
(C++)在Spark(Scala)上的重寫及優化，跟其他分布式圖計算框架相比，GraphX最大的貢獻是，在 ...
原文：十分鍾了解分布式計算:Google Dataflow
介紹 Google Cloud Dataflow是一種構建 管理和優化復雜數據處理流水線的方法，集成了許多內部技術，如用於數據高效並行化處理的Flume和具有良好容錯機制流處理的MillWheel。Dataflow當前的API還只有Java版本 其實Flume本身是提供Java C Python多種接口的，MillWheel也提供Java C 的API 。 相比原生的map reduce模型，Da ...
2014-07-13 12:38 4 8694 推薦指數：
相關推薦
十分鍾了解分布式計算:GraphLab
GraphLab是一個面向大規模機器學習/圖計算的分布式內存計算框架，由CMU在2009年開始的一個C++項目，這里的內容是基於論文 Low, Yucheng, et al. "Distributed GraphLab: A Framework for Machine Learning ...
十分鍾了解分布式計算:Petuum
Petuum是一個機器學習專用分布式計算框架，本文介紹其架構，並基於文章 More Effective Distributed ML via a Stale Synchronous Parallel Parameter Server，NIPS 2013 重點探討其核心內容SSP協議。 主要思想 ...
十分鍾了解分布式計算:Spark
Spark是一個通用的分布式內存計算框架，本文主要研討Spark的核心數據結構RDD的設計思路，及其在內存上的容錯。內容基於論文 Zaharia, Matei, et al. "Resilient Distributed Datasets: A Fault-Tolerant ...
輕量級的分布式日志追蹤利器，十分鍾即可接入，從此日志追蹤無難事
前言 隨着微服務盛行，很多公司都把系統按照業務邊界拆成了很多微服務，在排錯查日志的時候。因為業務鏈路貫穿着很多微服務節點，導致定位某個請求的日志以及上下游業務的日志會變得有些困難。 這時候很多童鞋會開始考慮上SkyWalking，Pinpoint等分布式追蹤系統來解決 ...
十分鍾了解Kubernetes
何為Kubernetes? 最簡單的一句話來概括Kubernetes。 它就是一套成熟的商用服務編排解決方案。Kubernetes定位在Saas層，重點解決了微服務大規模部署時的服務編排問題。 Kubernetes組件介紹 了解Kubernetes都是從Pod開始的。 Pod ...
十分鍾了解計算機系統
《深入理解計算機系統》筆記 計算機系統是由硬件和軟件相配合，運行應用程序的。 通過hello.c程序的生命周期：創建，編譯，運行，打印結果，結束，來了解計算機系統的內部工作機制。 1，創建 對於計算機來說，所有的信息均以 bit 來存儲。 1，創建hello.c文件 ...
十分鍾看懂雲計算概念
亞馬遜AWS、微軟Azure、阿里Aliyun組成的3A團隊連續多季度保持高速增長。AWS通過光環新網實現商用，IBM Bluemix則由世紀互聯提供運營，國際雲服務商陸續來了。Openstack發布 ...