kafka消息存儲原理及查詢機制

本文轉載自查看原文 2019-03-26 21:40 590 BigData

1：消息存儲

segment段中有兩個核心的文件一個是log,一個是index。當log文件等於1G時，新的會寫入到下一個segment中。

通過下圖中的數據，可以看到一個segment段差不多會存儲70萬條數據。

所以問題這么龐大的數據，kafka是如何快速從海量數據中定位得到-------基於它的查詢機制

2：查詢機制

本站轉載的文章為個人學習借鑒使用，本站對版權不負任何法律責任。如果侵犯了您的隱私權益，請聯系本站郵箱yoyou2525@163.com刪除。

猜您在找 Kafka 消息存儲機制 Kafka源碼分析(三) - Server端 - 消息存儲 ActiveMQ 消息存儲 RocketMQ架構原理解析（二）：消息存儲（CommitLog） kafka消息分區機制原理 RocketMQ消息存儲和ack ActiveMQ的消息存儲方式 RocketMQ(六)：nameserver與消息存儲定位實現 ActiveMQ消息存儲持久化【RocketMQ源碼分析】深入消息存儲（3）