1.1 背景介绍 最近，腾讯云的一个重要客户发现kafka broker内部的topic分区数据存储分布不均匀，导致部分磁盘100%耗尽，而部分磁盘只有40%的消耗量。 分析原因，发现存在部分topic的分区数据过于集中在某些磁盘导致，比如，以下截图显示的/data5 数据盘 ...

1.概述 Kafka的使用场景非常广泛，一些实时流数据业务场景，均依赖Kafka来做数据分流。而在分布式应用场景中，数据迁移是一个比较常见的问题。关于Kafka集群数据如何迁移，今天笔者将为大家详细介绍。 2.内容 本篇博客为大家介绍两种迁移场景，分别是同集群数据迁移、跨集群数据迁移。如下图 ...

。 二 集群扩容后数据是不会自动均衡到新机器上的，需要采用kafka-reassign-part ...

...

1.概述 在实际的应用场景中，数据存储在HBase集群中，但是由于一些特殊的原因，需要将数据从HBase迁移到Kafka。正常情况下，一般都是源数据到Kafka，再有消费者处理数据，将数据写入HBase。但是，如果逆向处理，如何将HBase的数据迁移到Kafka呢？今天笔者就给大家来分享一下具体 ...

随着业务的迅速发展，农业银行某系统承担的运行压力越来越大。现阶段， 该系统每天的交易量在2300 万笔以上，峰值达2950 万笔。交易量的攀升导致了后台数据库数据量的激增，从而影响了联机程序响应时间，也增加了系统各类资源开销和后续数据分析的处理时间。为保障系统稳定运行，项目组从增加系统资源、优化 ...

🍎✨ 数据备份与迁移 参考文章 ❗️pg_dump命令说明 ❗️pg_restore命令说明 Postgresql备份与还原命令pg_dump PostgreSQL pg_dump&psql 数据的备份与恢复 1、首先安装一下postgresql ❗️❗️❗️特别要注意版本 ...

，因为1.1之前Kafka只支持分区数据在不同broker间的重分配，而无法做到在同一个broker下的不同磁 ...