高吞吐量的分布式发布订阅消息系统Kafka-- 管理工具 Kafka Manager
一、概述 Kafka在雅虎内部被很多团队使用,媒体团队用它做实时分析流水线,可以处理高达20Gbps(压缩数据)的峰值带宽。 为了简化开发者和服务工程师维护Kafka集群的工作，构建了一个叫做Kafka管理器的基于Web工具，叫做 Kafka Manager。这个管理工具可以很容易 ...
原文：kafka--高性能的分布式消息系统
kafka是一个分布式的，高吞吐量的 信息分片存储，消息同步复制的开源消息服务，它提供了消息系统的功能，但是采用了独特的设计。 kafka最初由LinkedIn设计开发，使用Scala语言编写，用作LinkedIn网站的活动流数据和运营数据处理工具，这其中活动流数据是指页面访问量 被查看内容方面的信息以及搜索情况等内容，运营数据是指服务器的性能数据 CPU IO使用率 请求时间 服务日志等数据 ...
2016-05-10 16:42 0 1903 推荐指数：
相关推荐
(持续更新中~~~)kafka--消息引擎与分布式流处理平台
kafka概述 kafka是一个分布式的基于发布/订阅模式的消息队列(message queue)，一般更愿意称kafka是一款开源的消息引擎系统，只不过消息队列会耳熟一些。kafka主要应用于大数据实时领域。 为什么会有消息队列，主要是为了异步处理，提高效率。我们来看一张图 使用消息 ...
kafka-分布式消息系统
消息中间件MessageQuene 解耦且可扩展：业务复杂度的提升带来的也是耦合度的提高，消息队列在处理过程中间插入了一个隐含的、基于数据的接口层，两边的处理过程都要实现这一接口。这允许你独立的扩展或修改两边的处理过程，只要确保它们遵守同样的接口约束。 冗余：有些业务在处理 ...
Kafka分布式消息系统
1.简介 Kafka是一个分布式消息系统，使用Scala语言进行编写，具有高水平扩展以及高吞吐量特性。 目前流行的消息队列主要有三种：ActiveMQ、RabbitMQ、Kafka ActiveMQ、RabbitMQ均支持AMQP协议，Kafka使用仿AMQP协议，目前Flume ...
Kafka 分布式消息系统
Kafka 分布式消息系统 公司技术分享会的PPT，主要介绍了Kafka的最重要的一些概念，主题Topic、分区Partition、生产者Producer、消费者Consumer、消费者分组等。 ...
kafka：一个分布式消息系统
1.背景 最近因为工作需要，调研了追求高吞吐的轻量级消息系统Kafka，打算替换掉线上运行的ActiveMQ，主要是因为明年的预算日流量有十亿，而ActiveMQ的分布式实现的很奇怪，所以希望找一个适合分布式的消息系统。 以下是内容是调研过程中总结的一些知识和经验，欢迎拍砖。 2.基础知识 ...
分布式高性能消息处理中心HPMessageCenter
HPMessageCenter 部署说明 使用说明 扩展性 性能 ...
高性能分布式内存队列系统beanstalkd(转)
beanstalkd 一个高性能、轻量级的分布式内存队列系统，最初设计的目的是想通过后台异步执行耗时的任务来降低高容量Web应用系统的页面访问延迟,支持过有9.5 million用户的Facebook Causes应用。后来开源，之后有PostRank大规模部署和使用,每天处理百万级任务. 安装 ...