RabbitMQ,Elasticsearch學習,批量讀取消息隊列上的數據上傳到Elasticsearch


 

 

 

先上DEMO:

鏈接:https://pan.baidu.com/s/1owlkBJlIMDWZS9YdSTA7xw 

提取碼:7p0b 

電腦配置如圖:

測試結果:

1、2百萬條數據發送到MQ上需要2分45

2、單個消費者被動接收數據

3、主動拉取隊列里的消息

4、測試MQ主動拉取2百萬條信息還是544116毫秒,發送到ES,本來是2百萬條,但是存到1百萬條的時候就結束了,耗時611790,不知道是不是有上限

5、設置50W為一組插入到ES里,需要758秒

 


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM