【译】调优Apache Kafka集群
今天带来一篇译文“调优Apache Kafka集群”，里面有一些观点并无太多新颖之处，但总结得还算详细。该文从四个不同的目标出发给出了各自不同的参数配置，值得大家一读~ 原文地址请参考：https://www.confluent.io/blog ...
原文：DataPipeline |《Apache Kafka实战》作者胡夕：Apache Kafka监控与调优
胡夕 Apache Kafka实战 作者，北航计算机硕士毕业，现任某互金公司计算平台总监，曾就职于IBM 搜狗 微博等公司。国内活跃的Kafka代码贡献者。 前言 虽然目前Apache Kafka已经全面进化成一个流处理平台，但大多数的用户依然使用的是其核心功能：消息队列。对于如何有效地监控和调优Kafka是一个大话题，很多用户都有这样的困扰，今天我们就来讨论一下。 一 Kafka综述 在讨论具 ...
2018-09-04 16:18 0 1023 推荐指数：
相关推荐
《Apache kafka实战》读书笔记-kafka集群监控工具
《Apache kafka实战》读书笔记-kafka集群监控工具 作者：尹正杰 版权声明：原创作品，谢绝转载！否则将追究法律责任。 如官网所述，Kafka使用 ...
Apache Pulsar 在 BIGO 的性能调优实战（上）
背景 在人工智能技术的支持下，BIGO 基于视频的产品和服务受到广泛欢迎，在 150 多个国家/地区拥有用户，其中包括 Bigo Live（直播）和 Likee（短视频）。Bigo Live 在 1 ...
KAFKA 调优
KAFKA 调优 最近要对kafka集群做调优，就在网上看了些资料，总结如下。 我们的kafka版本是0.10.1.0。 机器配置是40G内存，300G硬盘。 一共有3台机器组成一个小的集群。 Kakfka的调优主要分为3个部分，Linux系统，JVM虚拟机，Kafka本身设置。 Linux ...
kafka调优
kafka调优:[root@bi-kafka-1 bin]# pwd/data/kafka-9092/bincat kafka-server-start.sh if [ "x$KAFKA_HEAP_OPTS" = "x" ]; then export KAFKA_HEAP_OPTS="-Xmx1G ...
kafka 延迟调优
场景， 通过日志发现总有某些消息从kafka发出到消费者接受，这段延时高达200毫秒 需求：发现那个环节是瓶颈 手段： 模拟环境测试 模拟环境： 4G8核心，千兆网卡， 阿里云kafka标准版集群20MB/s 读写规格，客户端go1.5 sarama v1.29.0 from ...
kafka性能调优
https://blog.csdn.net/vegetable_bird_001/article/details/51858915 主要优化原理和思路 kafka是一个高吞吐量分布式消息系统，并且提供了持久化。其高性能的有两个重要特点： 利用了磁盘连续 ...
Kafka的参数调优
这篇文章主要说一下在生产过程中的kafka常用的调优参数, 首先kafka的版本是0.9.0.1,针对以下几个方面来说, 针对kafka的堆内存: 针对kafka的集群调优: kafka的的消息机制有三种,同步 异步和 oneway 同步(sync)的意味着消息是以 ...