原文:kafka设置某个topic的数据过期时间

kafka 单独设置某个topic的数据过期时间 kafka 默认存放 天的临时数据,如果遇到磁盘空间小,存放数据量大,可以设置缩短这个时间。 全局设置 修改 server.properties log.retention.hours log.cleanup.policy delete 单独对某一个topic设置过期时间 但如果只有某一个topic数据量过大。想单独对这个topic的过期时间设置短 ...

2021-01-05 15:30 0 5221 推荐指数:

查看详情

kafka删除topic数据

一、概述 生产环境中,有一个topic数据量非常大。这些数据不是非常重要,需要定期清理。 要求:默认保持24小时,某些topic 需要保留2小时或者6小时 二、清除方式 主要有3个: 1. 基于时间 2. 基于日志大小 3. 基于日志起始偏移量 详情,请参考链接 ...

Wed Jan 30 01:34:00 CST 2019 0 1241
kafka删除topic数据

一、概述 生产环境中,有一个topic数据量非常大。这些数据不是非常重要,需要定期清理。 要求:默认保持24小时,某些topic 需要保留2小时或者6小时 二、清除方式 主要有3个: 1. ...

Thu Mar 12 04:56:00 CST 2020 0 6732
Kafka日志及Topic数据清理

由于项目原因,最近经常碰到Kafka消息队列拥堵的情况。碰到这种情况为了不影响在线系统的正常使用,需要大家手动的清理Kafka Log。但是清理Kafka Log又不能单纯的去删除中间环节产生的日志,中间关联的很多东西需要手动同时去清理,否则可能会导致删除后客户端无法消费的情况。 在介绍 ...

Wed Dec 21 06:22:00 CST 2016 1 73483
kafka 清除topic数据脚本

kafka 清除topic数据脚本 2018年07月25日 16:57:13 pete1223 阅读数:1028 ...

Mon Dec 31 12:25:00 CST 2018 0 625
kafka删除topic及其相关数据

1、删除kafka存储目录(server.properties文件log.dirs配置,默认为"/tmp/kafka-logs")相关topic目录 2、Kafka 删除topic的命令是: ./bin/kafka-topics --delete --zookeeper ...

Tue Feb 21 03:35:00 CST 2017 0 4714
kafka如何彻底删除topic数据

前言: 删除kafka topic及其数据,严格来说并不是很难的操作。但是,往往给kafka 使用者带来诸多问题。项目组之前接触过多个开发者,发现都会偶然出现无法彻底删除kafka的情况。本文总结多个删除kafka topic的应用场景,总结一套删除kafka topic的标准操作方法 ...

Tue Feb 15 02:24:00 CST 2022 0 939
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM