原文:Spark Over Yarn 发现输出到kafka报错: topic not present on metadata after x

原因是该kafka集群没有设置自动创建 topic,所以spark无法创建该 topic,因此也无法找到该 topic 的metadata 所以解决该问题的方法就是:手动创建该 topic ...

2020-12-03 16:32 0 980 推荐指数:

查看详情

filebeat输出到kafka

1、编辑filebeat的配置文件 # cat filebeat.yml ...

Wed Jul 31 18:49:00 CST 2019 0 1649
java日志输出到kafka

log4j2.xml 如下图,13-17行内配置kafka信息,以及id名字,在35行输出日志,在43行选择日志格式 需要添加依赖 ...

Sat Aug 31 00:38:00 CST 2019 0 599
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM