高吞吐量的分布式發布訂閱消息系統Kafka-- 管理工具 Kafka Manager
一、概述 Kafka在雅虎內部被很多團隊使用,媒體團隊用它做實時分析流水線,可以處理高達20Gbps(壓縮數據)的峰值帶寬。 為了簡化開發者和服務工程師維護Kafka集群的工作，構建了一個叫做Kafka管理器的基於Web工具，叫做 Kafka Manager。這個管理工具可以很容易 ...
原文：kafka--高性能的分布式消息系統
kafka是一個分布式的，高吞吐量的 信息分片存儲，消息同步復制的開源消息服務，它提供了消息系統的功能，但是采用了獨特的設計。 kafka最初由LinkedIn設計開發，使用Scala語言編寫，用作LinkedIn網站的活動流數據和運營數據處理工具，這其中活動流數據是指頁面訪問量 被查看內容方面的信息以及搜索情況等內容，運營數據是指服務器的性能數據 CPU IO使用率 請求時間 服務日志等數據 ...
2016-05-10 16:42 0 1903 推薦指數：
相關推薦
(持續更新中~~~)kafka--消息引擎與分布式流處理平台
kafka概述 kafka是一個分布式的基於發布/訂閱模式的消息隊列(message queue)，一般更願意稱kafka是一款開源的消息引擎系統，只不過消息隊列會耳熟一些。kafka主要應用於大數據實時領域。 為什么會有消息隊列，主要是為了異步處理，提高效率。我們來看一張圖 使用消息 ...
kafka-分布式消息系統
消息中間件MessageQuene 解耦且可擴展：業務復雜度的提升帶來的也是耦合度的提高，消息隊列在處理過程中間插入了一個隱含的、基於數據的接口層，兩邊的處理過程都要實現這一接口。這允許你獨立的擴展或修改兩邊的處理過程，只要確保它們遵守同樣的接口約束。 冗余：有些業務在處理 ...
Kafka分布式消息系統
1.簡介 Kafka是一個分布式消息系統，使用Scala語言進行編寫，具有高水平擴展以及高吞吐量特性。 目前流行的消息隊列主要有三種：ActiveMQ、RabbitMQ、Kafka ActiveMQ、RabbitMQ均支持AMQP協議，Kafka使用仿AMQP協議，目前Flume ...
Kafka 分布式消息系統
Kafka 分布式消息系統 公司技術分享會的PPT，主要介紹了Kafka的最重要的一些概念，主題Topic、分區Partition、生產者Producer、消費者Consumer、消費者分組等。 ...
kafka：一個分布式消息系統
1.背景 最近因為工作需要，調研了追求高吞吐的輕量級消息系統Kafka，打算替換掉線上運行的ActiveMQ，主要是因為明年的預算日流量有十億，而ActiveMQ的分布式實現的很奇怪，所以希望找一個適合分布式的消息系統。 以下是內容是調研過程中總結的一些知識和經驗，歡迎拍磚。 2.基礎知識 ...
分布式高性能消息處理中心HPMessageCenter
HPMessageCenter 部署說明 使用說明 擴展性 性能 ...
高性能分布式內存隊列系統beanstalkd(轉)
beanstalkd 一個高性能、輕量級的分布式內存隊列系統，最初設計的目的是想通過后台異步執行耗時的任務來降低高容量Web應用系統的頁面訪問延遲,支持過有9.5 million用戶的Facebook Causes應用。后來開源，之后有PostRank大規模部署和使用,每天處理百萬級任務. 安裝 ...