原文:Kafka 分區數可以增加或減少嗎?為什么?

我們可以使用bin kafka topics.sh 命令對 Kafka增加 Kafka 的分區數據,但是 Kafka 不支持減少分區數。Kafka 分區數據不支持減少是由很多原因的,比如減少的分區其數據放到哪里去 是刪除,還是保留 刪除的話,那么這些沒消費的消息不就丟了。如果保留這些消息如何放到其他分區里面 追加到其他分區后面的話那么就破壞了 Kafka 單個分區的有序性。如果要保證刪除分區數據插 ...

2020-05-26 00:06 0 3130 推薦指數:

查看詳情

LVM 管理減少swap分區空間增加到根分區

簡介 LVM是 Logical Volume Manager(邏輯卷管理)的簡寫,它是Linux環境下對磁盤分區進行管理的一種機制,它由Heinz Mauelshagen在Linux 2.4內核上實現。 物理存儲介質(PhysicalStorageMedia) 指系統的物理存儲設備:磁盤 ...

Fri Jul 24 00:52:00 CST 2015 0 1934
Kafka分區與消費者個數

Kafka分區是不是越多越好? 分區多的優點 kafka使用分區將topic的消息打散到多個分區分布保存在不同的broker上,實現了producer和consumer消息處理的高吞吐量。Kafka的producer和consumer都可以多線程地並行操作,而每個線程處理的是一個 ...

Sun Oct 21 22:26:00 CST 2018 0 2688
kafka--如何選擇Kafka分區和消費者個數

一.kafka分區優點 kafka使用分區將topic的消息打散到多個分區分布保存在不同的broker上,實現了producer和consumer消息處理的高吞吐量。Kafka的producer和consumer都可以多線程地並行操作,而每個線程處理的是一個分區的數據。因此分區實際上是調優 ...

Tue Aug 18 22:54:00 CST 2020 0 3031
如何確定Kafka分區、key和consumer線程

轉自:http://www.tuicool.com/articles/Aj6fAj3 如何確定Kafka分區、key和consumer線程 在Kafak中國社區的qq群中,這個問題被提及的比例是相當高的,這也是Kafka用戶最常碰到的問題之一。本文結合 ...

Mon Jun 26 19:30:00 CST 2017 0 1852
【原創】如何確定Kafka分區、key和consumer線程

在Kafak中國社區的qq群中,這個問題被提及的比例是相當高的,這也是Kafka用戶最常碰到的問題之一。本文結合Kafka源碼試圖對該問題相關的因素進行探討。希望對大家有所幫助。 怎么確定分區? “我應該選擇幾個分區?”——如果你在Kafka中國社區的群里 ...

Tue Aug 25 20:28:00 CST 2015 21 53994
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM