原文:kafka中的 zookeeper 起到什么作用,可以不用zookeeper么?

zookeeper 是一个分布式的协调组件,早期版本的kafka用zk做meta信息存储,consumer的消费状态,group的管理以及 offset的值。考虑到zk本身的一些因素以及整个架构较大概率存在单点问题,新版本中逐渐弱化了zookeeper的作用。新的consumer使用了kafka内部的group coordination协议,也减少了对zookeeper的依赖, 但是broker依 ...

2020-05-25 23:31 0 4465 推荐指数:

查看详情

zookeeperkafka作用

ZookeeperKafka 作用 1、Broker注册 Broker是分布式部署并且相互之间相互独立,但是需要有一个注册系统能够将整个集群的Broker管理起来,此时就使用到了Zookeeper。在Zookeeper上会有一个专门用来进行Broker服务器 ...

Sat Jun 08 20:51:00 CST 2019 0 2185
Zookeeper 对于 Kafka作用是什么?

Zookeeper 是一个开放源码的、高性能的协调服务,它用于 Kafka 的分布式应用。 Zookeeper 主要用于在集群不同节点之间进行通信 在 Kafka ,它被用于提交偏移量,因此如果节点在任何情况下都失败了,它都 可以从之前提交的偏移量获取 除此之外,它还执行 ...

Sun Nov 29 21:31:00 CST 2020 0 486
Kafka(四)Kafkazookeeper的存储

Kafkazookeeper存储结构图 二 分析 2.1 topic注册信息 /brokers/topics/[topic] : 存储某个topic的partitions所有分配信息 2.2 partition状态信息 /brokers ...

Sun Aug 05 22:22:00 CST 2018 0 3691
kafkazookeeper的存储结构

参考site:http://kafka.apache.org/documentation.html#impl_zookeeper 1、zookeeper客户端相关命令 在确保zookeeper服务启动状态下,通过 bin/zkCli.sh -server 127.0.0.1:2181 该命令 ...

Wed Jan 13 23:22:00 CST 2016 0 8905
kafkazookeeper

1.Kafka入门教程 1.1 消息队列(Message Queue) Message Queue消息传送系统提供传送服务。消息传送依赖于大量支持组件,这些组件负责处理连接服务、消息的路由和传送、持久性、安全性以及日志记录。消息服务器可以使用一个或多个代理实例。 JMS(Java ...

Thu Jan 16 21:52:00 CST 2020 0 724
zookeeper在Hadoop集群作用(一)

一、什么是Zookeeper ZooKeeper 顾名思义 动物园管理员,他是拿来管大象(Hadoop) 、 蜜蜂(Hive) 、 小猪(Pig) 的管理员, Apache Hbase和 Apache Solr 以及LinkedIn sensei 等项目中都采用到了 Zookeeper ...

Thu Dec 19 19:03:00 CST 2019 0 3717
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM