今天查看Kafka 0.10.0的官方文档，发现了这样一句话：Configuration parameter replica.lag.max.messages was removed. Partition leaders will no longer consider ...

Kafka在弹性、容错性以及高吞吐量方面有着很大的优势。想要达到生产环境最优，发挥这些特性，需要我们进行一系列的配置。Kafka提供了非常多的配置属性，对于初学者而言，很容易陷入困惑。其实，多数的配置已经满足了大部分的使用场景，本文分享总结了几个比较重要的配置参数，主要是针对producer端 ...

参考： https://blog.csdn.net/jediael_lu/article/details/77097361 申请一个topic，官方命令如下： bin/kafka-topics.sh --create ...

为了能够有效 治理负载失衡 Kafka 引入了优先副本( preferred replica) 的概念 所谓的优先副本是指在 AR 集合列表中的第 1个副本 如上面主题 topic partitions 分区 AR 集合 表（Replicas）为[1,2,0]， 那么分区的优先 ...

1.概述 　　Kafka 快速稳定的发展，得到越来越多开发者和使用者的青睐。它的流行得益于它底层的设计和操作简单，存储系统高效，以及充分利用磁盘顺序读写等特性，和其实时在线的业务场景。对于Kafka来说，它是一个分布式的，可分区的，多副本，多订阅者的，基于Zookeeper统一协调的分布式日志 ...

副本定义 Kafka 是有主题概念的，而每个主题又进一步划分成若干个分区。副本的概念实际上是在分区层级下定义的，每个分区配置有若干个副本。 所谓副本（Replica），本质就是一个只能追加写消息的提交日志。根据 Kafka 副本机制的定义，同一个分区下的所有副本保存有相同的消息序列 ...

一、什么是副本机制： 通常是指分布式系统在多台网络互联的机器上保存有相同的数据拷贝 二、副本机制的好处： 1、提供数据冗余 系统部分组件失效，系统依然能够继续运转，因而增加了整体可用性以及数据持久性 2、提供高伸缩性 支持横向扩展，能够通过增加机器的方式来提升读性能，进而提高读 ...

工作案例: 大数据开发用系统脚本自动在kafka建topic,检查后才发现副本数只有1个,存在数据丢失的风险。需要立刻把副本数改为3个。 开始干活，首先想到的是下面的命令： ${BIN_PATH}/kafka-topics.sh --zookeeper ...