Kafka学习笔记（六、Kafka Connect）
目录： 什么是Kafka Connect Kafka Connect能干什么 Kafka Connect使用示例 什么是Kafka Connect 它是一种用于Kafka和其它系统之间（其它数据源）流式数据传输的工具，如Mysql >> Oracle，Json ...
原文：Kafka笔记
最近做的一个项目需要跟Kafka打交道，学习了很多相关知识，就到这里来汇总一下。 kafka是一个传递消息的系统，原本是用来快速记录海量log的，现在也经常用作消息队列。它主要由三个部分组成，producer，broker以及consumer。producer发布消息，broker存储消息，consumer接收消息。 发布消息的时候，producer会把它发送到broker的某一个topic上。每 ...
2015-03-14 00:48 0 2360 推荐指数：
相关推荐
kafka学习笔记（二）kafka的基本使用
概述 第一篇随笔从消息队列的定义和各种应用，以及kafka的分类定义和基本知识，第二篇就写一篇关于kafka的基本实际配置和使用的随笔，包括kafka的集群参数的配置，生产者使用机制，消费者使用机制。总之我会使用由浅到深，由概括到具体的介绍kafka的每个功能。 kafka集群的配置 ...
kafka 入门笔记 #1
kafka 入门笔记（#1） 单机测试 下载版本，解压 启动服务 Kafka用到了Zookeeper ，所以首先要启动zookeeper，先启动一个单实例的zk服务。 启动Kafka 服务 创建 topic 创建一个 名叫“test”的topic ，只有一个分区，一个副本 ...
Kafka 学习笔记
的分布式事务的保障，也能保障业务执行之后的最终⼀致性 Kafka 概述 1. 介绍 Ka ...
Kafka 学习笔记之 架构
Kafka的概念： 1、 AMQP协议 Advanced Message Queuing Protocol （高级消息队列协议） The Advanced Message Queuing Protocol (AMQP)： 是一个标准开放的应用层 ...
kafka搭建笔记
环境CentOS7.0，JDK1.8 一、下载安装 在kafka官网 http://kafka.apache.org/downloads下载到最新的kafka安装包 在kafka解压目录下下有一个config的文件夹，里面放置的是配置文件 ...
kafka学习笔记
kafka学习笔记 参考文档 Kafka背景及架构介绍 Kafka背景 对网站使用情况做报表，如活动数据（page view、查看内容、搜索内容等）和运营数据（CPU、IO使用率、请求时间、服务器日志等）要用到的数据的收集和分析。 Kafka简介 Kafka是一个分布式的，基于发布 ...
Kafka学习笔记之Kafka日志删出策略
0x00 概述 kafka将topic分成不同的partitions，每个partition的日志分成不同的segments，最后以segment为单位将陈旧的日志从文件系统删除。 假设kafka的在server.properity文件中设置的日志目录为tmp/kafka-logs，对于名为 ...