kafka--高性能的分布式消息系統
kafka是一個分布式的，高吞吐量的、信息分片存儲，消息同步復制的開源消息服務，它提供了消息系統的功能，但是采用了獨特的設計。 kafka最初由LinkedIn設計開發，使用Scala語言編寫，用作LinkedIn網站的活動流數據和運營數據處理工具，這其中活動流數據是指頁面訪問量、被查看內容 ...
相關推薦
如何設計高性能的分布式鎖
什么是分布式鎖？ 在 JVM 中，在多線程並發的情況下，我們可以使用同步鎖或 Lock 鎖，保證在同一時間內，只能有一個線程修改共享變量或執行代碼塊。但現在我們的服務都是基於分布式集群來實現部署的，對於一些共享資源，在分布式環境下使用 Java 鎖的方式就失去作用了。 使用數據庫實現一個分布式 ...
redission 高性能分布式鎖
Redis 是最流行的 NoSQL 數據庫解決方案之一，而 Java 是世界上最流行（注意，我沒有說“最好”）的編程語言之一。雖然兩者看起來很自然地在一起“工作”，但是要知道，Redis ...
分布式實時處理系統——C++高性能編程
【前言】基於通信基礎，介紹Hurricane實時處理系統的工程實現，主要使用C++語言。 一、IPC、socket、異步I/O epoll 二、C++11 1、linux內存管理中使用RALL原則，C++通過加入 類的構造函數和析構函數 解決資源管理問題。讓編譯器自己去調用析構函數 ...
EMQ X Enterprise (MQTT Broker) + Apache Kafka 構建高性能物聯網消息處理后台
背景 在各類物聯網項目中，設備產生的消息不僅僅作用於設備之間，還需要供業務系統使用以實現如安全審計、流量計費、數據統計、通知觸發等功能，類似很容易通過以下原型系統完成： 該原型中需要在 EMQ X 上維護多個數據通道，以供每個業務環節按照各自需求從 EMQ X 中獲取消息數據。這種解決方案 ...
Hmily：高性能異步分布式事務TCC框架
Hmily框架特性 無縫集成Spring,Spring boot start。 無縫集成Dubbo,SpringCloud,Motan等rpc框架。 多種事務日志的存儲方式（ ...
高性能分布式內存隊列系統beanstalkd(轉)
beanstalkd 一個高性能、輕量級的分布式內存隊列系統，最初設計的目的是想通過后台異步執行耗時的任務來降低高容量Web應用系統的頁面訪問延遲,支持過有9.5 million用戶的Facebook Causes應用。后來開源，之后有PostRank大規模部署和使用,每天處理百萬級任務. 安裝 ...
分布式之高性能IO組件
因為畢業設計（實時分析大型數據流），開始對分布式並行計算做研究，第一個問題就是通訊。高性能的通訊是整個系統性能的基本保障。 方案 就目前的經驗來講，最好的通信選擇是：異步非阻塞IO + 資源池。 異步非阻塞是為了避免因IO而阻塞進程（或是線程）而造成計算資源的浪費 使用資源池 ...