原文:Spark Over Yarn 發現輸出到kafka報錯: topic not present on metadata after x

原因是該kafka集群沒有設置自動創建 topic,所以spark無法創建該 topic,因此也無法找到該 topic 的metadata 所以解決該問題的方法就是:手動創建該 topic ...

2020-12-03 16:32 0 980 推薦指數:

查看詳情

filebeat輸出到kafka

1、編輯filebeat的配置文件 # cat filebeat.yml ...

Wed Jul 31 18:49:00 CST 2019 0 1649
java日志輸出到kafka

log4j2.xml 如下圖,13-17行內配置kafka信息,以及id名字,在35行輸出日志,在43行選擇日志格式 需要添加依賴 ...

Sat Aug 31 00:38:00 CST 2019 0 599
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM