Druid：一個用於大數據實時處理的開源分布式系統
Druid是一個用於大數據實時查詢和分析的高容錯、高性能開源分布式系統，旨在快速處理大規模的數據，並能夠實現快速查詢和分析。尤其是當發生代碼部署、機器故障以及其他產品系統遇到宕機等情況時，Druid仍能夠保持100%正常運行。創建Druid的最初意圖主要是為了解決查詢延遲問題，當時試圖使用 ...
原文：Facebook的實時流處理技術——Scuba是Facebook的一個非常快速、分布式的內存數據庫，用於實時分析和查詢
Scuba，Facebook的一個非常快速 分布式的內存數據庫，用於實時分析和查詢。是Facebook的回歸分析代碼 錯誤報告監控 廣告收入監控和性能調試的背后主力。 Facebook的實時流處理技術 隨着雲計算大數據的發展，有越來越多的場景需要借助於實時數據處理技術，為此有很多公司開發了自己的實時處理系統，Facebook就是其中的一員，他們構建的實時數據處理生態系統每秒鍾能夠處理數百GB的數據 ...
2017-02-15 12:29 0 1971 推薦指數：
相關推薦
分布式數據訪問服務之2—數據實時分析篇
上篇博文中，我們橫向對比了業界主流的分布式數據訪問服務，可以說是各有所長： 分布式數據訪問服務之1—華山論劍篇 在數據庫分庫分表實現橫向伸縮后，數據的綜合查詢、分析，業界都有哪些解決方案？這是一個值得研究和討論的主題。 所以，本篇文章中繼續研究分庫分表后的數據庫綜合查詢和實時分析技術 ...
實時查詢引擎 - Facebook Presto 介紹與應用
1. Presto 是什么 Facebook presto是什么，繼Facebook創建了HIVE神器后的又一以SQL語言作為接口的分布式實時查詢引擎，可以對PB級的數據進行快速的交互式查詢。它支持標准的ANSI SQL.包含查詢，聚合，JOIN以及窗口函數 ...
如何開發一個分布式內存數據庫
如何開發一個分布式內存數據庫 目前有很多商用的內存數據庫(timesten, atibase)，很多開源的分布式物理數據庫，而成熟的分布式內存數據庫卻很少。當然mysql cluster算是一個，但其受控於oracle，真正要拿來商用，費用應該不低。我們從使用內存數據庫已有近15年歷 ...
如何快速寫一個分布式實時應用程序
在開源搜索引擎Iveely的0.8.0中，我們有提到Iveely Computing實時計算平台，因為Iveely搜索引擎也是基於這個平台做的開發，因此，我們可以利用這個平台，輕松構建分布式實時應用程序。在開始構建程序之前，請按照這里部署Iveely Computing，確定部署無誤之后 ...
Docker搭建NSQ實時分布式消息集群
NSQ是一個基於Go語言的分布式實時消息平台，它基於MIT開源協議發布，代碼托管在GitHub。NSQ可用於大規模系統中的實時消息服務，並且每天能夠處理數億級別的消息，其設計目標是為在分布式環境下運行的去中心化服務提供一個強大的基礎架構。 NSQ具有分布式、去中心化的拓撲結構，該結構具有無單點故障 ...
Storm分布式實時流計算框架相關技術總結
Storm作為一個開源的分布式實時流計算框架，其內部實現使用了一些常用的技術，這里是對這些技術及其在Storm中作用的概括介紹。以此為基礎，后續再深入了解Storm的內部實現細節。 1. Zookeeper集群Zookeeper是一個針對大型分布式系統的可靠協調服務系統，其采用類似Unix ...
帶你玩轉Flink流批一體分布式實時處理引擎
摘要：Apache Flink是為分布式、高性能的流處理應用程序打造的開源流處理框架。 本文分享自華為雲社區《【雲駐共創】手把手教你玩轉Flink流批一體分布式實時處理引擎》，作者： 萌兔之約。 Apache Flink是為分布式、高性能的流處理應用程序打造的開源流處理框架。Flink ...