EFK+kafka集群實戰


一、kafka簡介

業務層可以直接寫入到kafka隊列中,不用擔心elasticsearch的寫入效率問題

架構圖:

1、kafka是一個消息隊列服務器,kafka服務又稱為broker,消息發送者稱為producer,消息接收者稱為consumer,
2、消息以topic的形式發送到broker,消費者訂閱topic,實現按需取用的消費模式
3、創建topic需要指定replication-factor(復制數目,通常=broker數目);每個topic可能有多個分區(partition),每個分區的消息內容不會重復

上圖中:日志為生產者,ES為消費者

 


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM