分布式消息流平台：不要只想着Kafka，还有Pulsar
摘要：Pulsar作为一个云原生的分布式消息流平台，越来越频繁地出现在人们的视野中，大有替代Kafka江湖地位的趋势。 本文分享自华为云社区《MRS Pulsar：下一代分布式消息流平台全新发布！》，作者： Lothar。 Pulsar的前世今生 Apache Pulsar是一个发布 ...
原文：分布式流平台Kafka
提到Kafka很多人的第一印象就是它是一个消息系统，但Kafka发展至今，它的定位已远不止于此，而是一个分布式流处理平台。对于一个流处理平台通常具有三个关键能力： . 发布和订阅消息流，在这一点上它与消息队列或企业消息系统类似 . 以容错的持久化方式存储消息流 . 在消息流产生时处理它们 目前，Kafka通常应用于两大类应用： . 构建实时的流数据管道，可靠地在系统和应用程序之间获取数据 . 构建 ...
2020-11-13 09:14 0 654 推荐指数：
相关推荐
Apache Kafka分布式流处理平台及大厂面试宝典v3.0.0
概述 **本人博客网站 **IT小神 www.itxiaoshen.com 定义 Apache Kafka官网地址 http://kafka.apache.org/ 最新版本为 3.0.0 Apache Kafka是一个开源的分布式事件流平台，使用Scala和Java混合 ...
(持续更新中~~~)kafka--消息引擎与分布式流处理平台
kafka概述 kafka是一个分布式的基于发布/订阅模式的消息队列(message queue)，一般更愿意称kafka是一款开源的消息引擎系统，只不过消息队列会耳熟一些。kafka主要应用于大数据实时领域。 为什么会有消息队列，主要是为了异步处理，提高效率。我们来看一张图 使用消息 ...
分布式缓存 — kafka
Kafka是一个分布式、支持分区的（partition）、多副本的（replica），基于zookeeper协调的分布式消息系统，它的最大的特性就是可以实时的处理大量数据以满足各种需求场景：比如基于hadoop的批处理系统、低延迟的实时系统、storm/Spark流式处理引擎，web/nginx ...
Pulsar云原生分布式消息和流平台v2.8.0
Pulsar云原生分布式消息和流平台 **本人博客网站 **IT小神 www.itxiaoshen.com Pulsar官方网站 Apache Pulsar是一个云原生的分布式消息和流媒体平台，最初创建于雅虎!现在是Apache软件基金会的顶级项目 官网首页列举一些关键特性 ...
Kafka分布式查询引擎
1.概述 Kafka是一个分布式消息中间件系统，里面存储着实际场景中的数据。Kafka原生是不支持点查询的，如果我们想对存储在Topic中的数据进行查询，可能需要对Topic中的数据进行消费落地，然后构建索引（或者数据落地到自带所以的存储系统中，例如HBase、Hive等）。今天，笔者就为 ...
Kafka分布式的消息顺序
Kafka分布式的单位是partition，同一个partition用一个write ahead log组织，所以可以保证FIFO的顺序。不同partition之间不能保证顺序。 但是绝大多数用户都可以通过message key来定义，因为同一个key的message可以保证只发送到 ...
Kafka分布式集群搭建
环境说明 kafka自0.9之后增加了connector的特性。本文主要是搭建一个分布式的kafka connector和broker。 本文用了三台机器进行部署，使用centos 6.6。 hostname ip role ...