一、下载 下载地址： http://kafka.apache.org/downloads.html http://mirrors.hust.edu.cn/apache/ 二、安装前提（zookeeper安装） 参考http://www.cnblogs.com/qingyunzong/p ...

一、Kafka的架构 如上图所示，一个典型的Kafka集群中包含若干Producer（可以是web前端产生的Page View，或者是服务器日志，系统CPU、Memory等），若干broker（Kafka支持水平扩展，一般broker数量越多，集群吞吐率越高），若干Consumer ...

　　一直在思考写一些什么东西作为2017年开篇博客。突然看到一篇《Kafka学习之路》的博文，觉得十分应景，于是决定搬来这“他山之石”。虽然对于Kafka博客我一向坚持原创，不过这篇来自Confluent团队Gwen Shapira女士的博文实在精彩，所以还是翻译给大家，原文参见 ...

一、高可用的由来 1.1　为何需要Replication 　　在Kafka在0.8以前的版本中，是没有Replication的，一旦某一个Broker宕机，则其上所有的Partition数据都不可被消费，这与Kafka数据持久性及Delivery Guarantee的设计目标相悖 ...

一、Kafka在zookeeper中存储结构图 二、分析 2.1　topic注册信息 /brokers/topics/[topic] : 存储某个topic的partitions所有分配信息 2.2　partition状态信息 /brokers ...

现在从事java开发的同学，不论是在面试过程中还是在日常的工作中，肯定会碰到消息队列的情况，市面上消息队列有很多：kafka、rocketMQ、rabbitMQ、zeroMQ等，从本篇博客起计划分享一些kafka方面的知识。 消息队列基础知识 所谓消息队列很好理解，把它拆开来看就是消息和队列 ...

一、简介 1.1 概述 Kafka是最初由Linkedin公司开发，是一个分布式、分区的、多副本的、多订阅者，基于zookeeper协调的分布式日志系统（也可以当做MQ系统），常见可以用于web/nginx日志、访问日志，消息服务等等，Linkedin于2010年贡献 ...

Kafka 简介 Kafka是分布式流平台。 一个流平台有3个主要特征： 发布和订阅消息流，这一点与传统的消息队列相似。 以容灾持久化方式的消息流存储。 在消息流发生时处理消息流。 Kafka通常使用在两大类应用中： 在系统或应用之间，构建实时、可靠的消息流管 ...