原文:Kafka 都有哪些特點?

高吞吐量 低延遲:kafka每秒可以處理幾十萬條消息,它的延遲最低只有幾毫秒,每個topic可以分多個partition, consumer group 對partition進行consume操作。 可擴展性:kafka集群支持熱擴展 持久性 可靠性:消息被持久化到本地磁盤,並且支持數據備份防止數據丟失 容錯性:允許集群中節點失敗 若副本數量為n,則允許n 個節點失敗 高並發:支持數千個客戶端同 ...

2020-05-17 20:29 0 886 推薦指數:

查看詳情

kafka相關概念與特點

概念 消息(Message):kafka的數據單元,相當於數據庫里面的一個數據行或一條記錄。消息由字節數組組成,所以對於Kafka 來說,消息里的數據沒有特別的格式或含義。消息可以有一個可選的元數據,也就是鍵。鍵也是一個字節數組,與消息一樣,對於Kafka來說也沒有特殊的含義。當消息以一種可控 ...

Fri Jan 03 22:28:00 CST 2020 0 697
Kafka特點及使用場景

Kafka是分布式發布-訂閱消息系統。它最初由LinkedIn公司開發,之后成為Apache項目的一部分。Kafka是一個分布式的,可划分的,冗余備份的持久性的日志服務。它主要用於處理活躍的流式數據。 在大數據系統中,常常會碰到一個問題,整個大數據是由各個子系統組成,數據需要在各個子系統中高 ...

Tue Mar 01 17:38:00 CST 2016 0 8401
Kafka特點及使用場景

Kafka是分布式發布-訂閱消息系統。它最初由LinkedIn公司開發,之后成為Apache項目的一部分。Kafka是一個分布式的,可划分的,冗余備份的持久性的日志服務。它主要用於處理活躍的流式數據。在大數據系統中,常常會碰到一個問題,整個大數據是由各個子系統組成,數據需要在各個子系統中高性能,低 ...

Tue Dec 26 16:59:00 CST 2017 0 10428
嵌入式操作系統的主要特點都有哪些

嵌入式操作系統(EOS)是指用於嵌入式系統的操作系統。嵌入式操作系統是一種用途廣泛的系統軟件,通常包括與硬件的底層驅動軟件、系統內核、設備驅動接口、通信協議、圖形界面、標准化瀏覽器等。嵌入式系統 ...

Sat Dec 21 14:29:00 CST 2019 0 900
spark 從 kafka 消費的兩種方式,分別有什么特點

(1) Receiver 方式 使用 kafka 的高層次 API 進行消費,然而,在默認的配置下,這種方式可能會因為底層的失敗而丟失數據。如果要啟用高可靠機制,讓數據零丟失,就必須啟用 Spark Streaming 的預寫日志機制(Write Ahead Log,WAL)。該機制會同 ...

Fri Apr 17 20:26:00 CST 2020 0 608
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM