【译】Apache Flink Kafka consumer
Flink提供了Kafka connector用于消费/生产Apache Kafka topic的数据。Flink的Kafka consumer集成了checkpoint机制以提供精确一次的处理语义。在具体的实现过程中，Flink不依赖于Kafka内置的消费组位移管理，而是在内部自行记录和维护 ...
原文：【译】99th Percentile Latency at Scale with Apache Kafka
前言 今天带来一篇不是自己原创但觉得很有深度的文章： th Percentile Latency at Scale with Apache Kafka 背景 在同时要求低延时和高质量数据交付的众多Apache Kafka使用场景中，反欺诈 支付系统和股票交易平台仅仅是其中有代表性的几个。例如，网上银行交易就要求反欺诈系统能够实时进行检测且每单交易检测时间不能超过 ms，否则会影响用户体验。 对于K ...
2020-03-04 16:49 2 1194 推荐指数：
相关推荐
【译】调优Apache Kafka集群
今天带来一篇译文“调优Apache Kafka集群”，里面有一些观点并无太多新颖之处，但总结得还算详细。该文从四个不同的目标出发给出了各自不同的参数配置，值得大家一读~ 原文地址请参考：https://www.confluent.io/blog ...
Pingmesh: A Large-Scale System for Data Center Network Latency Measurement and Analysis
简要 在今天的数据中心的网络中，涉及到的网络设备是极其复杂多样的。一个大型的数据中心都有成百上千的节点，网卡，交换机，路由器以及无数的网线，光纤。在这些硬件设备基础上构建了很多软件，比如搜索引擎、分 ...
【译】Apache Kafka支持单集群20万分区
/apache-kafka-supports-200k-partitions-per-cluster Kafka中topic可以设置多个分区，而分区是最小的并行度单位 ...
【译】Kafka学习之路
一直在思考写一些什么东西作为2017年开篇博客。突然看到一篇《Kafka学习之路》的博文，觉得十分应景，于是决定搬来这“他山之石”。虽然对于Kafka博客我一向坚持原创，不过这篇来自Confluent团队Gwen Shapira女士的博文实在精彩，所以还是翻译给大家，原文参见 ...
【译】Kafka最佳实践 / Kafka Best Practices
本文来自于DataWorks Summit/Hadoop Summit上的《Apache Kafka最佳实践》分享，里面给出了很多关于Kafka的使用心得，非常值得一看，今推荐给大家。 硬件配置 JBOD: Just bunch of disks，就是普通的一堆磁盘组成的集群 OS ...
【译】Kafka Producer Sticky Partitioner
最近事情多有点犯懒，依然带来一篇译文：Apache Kafka Producer Improvements with the Sticky Partitioner 消息在系统中流转的时间对于Kafka的性能来说至关重要。具体到Producer而言，Producer端的延时（Latency ...
Spring for Apache Kafka
官方文档详见：http://docs.spring.io/spring-kafka/docs/1.0.2.RELEASE/reference/htmlsingle/ Authors Gary Russell , Artem Bilan ...