关于 Topic 和 Partition： 　　Topic： 在 kafka 中，topic 是一个存储消息的逻辑概念，可以认为是一个消息集合。每条消息发送到 kafka 集群的消息都有一个类别。物理上来说，不同的 topic 的消息是分开存储的，每个 topic 可以有多个生产者向它发送消息 ...

使用监听器，来实现实时消费nsq的消息 一、目前spring boot中支持的事件类型如下 ApplicationFailedEvent：该事件为spring boot启动失败时的操作 ApplicationPreparedEvent：上下文context准备时触发 ...

1、 consumer API kafka 提供了两套 consumer API： 其中 high-level consumer API 提供了一个从 kafka 消费数据的高层抽象，而 SimpleConsumer API 则需要开发人员更多地关注细节。 1.1 ...

...

Kafka架构组成：由producer（消息生产者）、consumer（消息消费者）、borker(kafka集群的server，负责处理消息读、写请求，存储消息，在kafka cluster这一层这里，其实里面是有很多个broker)、topic（消息队列/分类相当于队列，里面 ...

查看主题命令 展示topic列表 ./kafka-topics.sh --list --zookeeper 172.18.153.12:2188 描述topic ./kafka-topics.sh --describe --zookeeper 172.18.153.12:2188 ...

项目中最近使用kafka需要定时清理消息，我们知道kafka有周期性清理消息机制,但是项目中往往因为数据量较大，需要手动控制分区已消费消息的清理。 此处使用的是反编译程序，具体几个方法已标出， 个人清理想法：大致流程就是根据topic获取所有的分区，然后根据遍历每个分区的偏移量，然后存入 ...

导入Kafka <dependency> 　　<groupId>org.springframework.kafka</groupId> 　　<artifactId>spring-kafka</artifactId> 　　< ...