kafka常用操作命令


1.启动Kafka,其中">>/dev/null"表示将日志信息输出到"黑洞",其中"2>&1"表示将错误信息和前面的日志信息一样,也输出到"黑洞",末尾的"&"表示以后台方式启动kafka:

bin/kafka-server-start.sh config/server.properties >>/dev/null 2>&1 &

 

2.启动生产者,往"accesslog"这个Topic中发送消息:

bin/kafka-console-producer.sh --topic accesslog --broker-list localhost:9092 

 

3.启动消费者,从"accesslog"这个Topic中消费消息,其中"--from-beginning"为可选参数,表示要从头消费消息:

bin/kafka-console-consumer.sh --topic accesslog --from-beginning --zookeeper localhost:2181 

 

4.创建一个名为"mytopic"的Topic:

bin/kafka-topics.sh --create --topic mytopic --replication-factor 2 --partitions 3 --zookeeper localhost:2181 

 

5.查看"mytopic"这个Topic的详细信息:

bin/kafka-topics.sh --describe --topic mytopic --zookeeper localhost:2181

 

6.查看所有的Topic列表:

bin/kafka-topics.sh --list --zookeeper localhost:2181

 

7.kafka集群批量启动脚本:

  说明:通过"start-kafka.sh"脚本,读取"kafka/bin"目录下"slave"文件中配置的主机列表,并通过一个while循环,用ssh分别启动各个主机上的kafka服务器。

[root@hadoop01 bin]# cat start-kafka.sh 
cat /root/apps/kafka/bin/slave | while read line
do
{
  echo $line
  ssh $line "source /etc/profile;nohup kafka-server-start.sh /root/apps/kafka/config/server.properties >/dev/null 2>&1 &"
}&
wait
done
[root@hadoop01 bin]# cat slave 
hadoop01
hadoop02
hadoop03
[root@hadoop01 bin]# 

 


免责声明!

本站转载的文章为个人学习借鉴使用,本站对版权不负任何法律责任。如果侵犯了您的隐私权益,请联系本站邮箱yoyou2525@163.com删除。



 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM