原文:Kafka 分区数可以增加或减少吗?为什么?

我们可以使用bin kafka topics.sh 命令对 Kafka增加 Kafka 的分区数据,但是 Kafka 不支持减少分区数。Kafka 分区数据不支持减少是由很多原因的,比如减少的分区其数据放到哪里去 是删除,还是保留 删除的话,那么这些没消费的消息不就丢了。如果保留这些消息如何放到其他分区里面 追加到其他分区后面的话那么就破坏了 Kafka 单个分区的有序性。如果要保证删除分区数据插 ...

2020-05-26 00:06 0 3130 推荐指数:

查看详情

LVM 管理减少swap分区空间增加到根分区

简介 LVM是 Logical Volume Manager(逻辑卷管理)的简写,它是Linux环境下对磁盘分区进行管理的一种机制,它由Heinz Mauelshagen在Linux 2.4内核上实现。 物理存储介质(PhysicalStorageMedia) 指系统的物理存储设备:磁盘 ...

Fri Jul 24 00:52:00 CST 2015 0 1934
Kafka分区与消费者个数

Kafka分区是不是越多越好? 分区多的优点 kafka使用分区将topic的消息打散到多个分区分布保存在不同的broker上,实现了producer和consumer消息处理的高吞吐量。Kafka的producer和consumer都可以多线程地并行操作,而每个线程处理的是一个 ...

Sun Oct 21 22:26:00 CST 2018 0 2688
kafka--如何选择Kafka分区和消费者个数

一.kafka分区优点 kafka使用分区将topic的消息打散到多个分区分布保存在不同的broker上,实现了producer和consumer消息处理的高吞吐量。Kafka的producer和consumer都可以多线程地并行操作,而每个线程处理的是一个分区的数据。因此分区实际上是调优 ...

Tue Aug 18 22:54:00 CST 2020 0 3031
如何确定Kafka分区、key和consumer线程

转自:http://www.tuicool.com/articles/Aj6fAj3 如何确定Kafka分区、key和consumer线程 在Kafak中国社区的qq群中,这个问题被提及的比例是相当高的,这也是Kafka用户最常碰到的问题之一。本文结合 ...

Mon Jun 26 19:30:00 CST 2017 0 1852
【原创】如何确定Kafka分区、key和consumer线程

在Kafak中国社区的qq群中,这个问题被提及的比例是相当高的,这也是Kafka用户最常碰到的问题之一。本文结合Kafka源码试图对该问题相关的因素进行探讨。希望对大家有所帮助。 怎么确定分区? “我应该选择几个分区?”——如果你在Kafka中国社区的群里 ...

Tue Aug 25 20:28:00 CST 2015 21 53994
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM