flume监控
flume提供了一个度量框架，可以通过http的方式进行展现，当启动agent的时候通过传递参数 -Dflume.monitoring.type=http参数给flume agent: 这样flume会在5653端口上启动一个 ...
原文：flume监控
Flume本身提供了http, ganglia的监控服务，而我们目前主要使用zabbix做监控。因此，我们为Flume添加了zabbix监控模块，和sa的监控服务无缝融合。 另一方面，净化Flume的metrics。只将我们需要的metrics发送给zabbix，避免 zabbix server造成压力。目前我们最为关心的是Flume能否及时把应用端发送过来的日志写到Hdfs上， 对应关注的met ...
2014-08-12 09:27 0 7957 推荐指数：
相关推荐
Flume的监控参数
参考 flume的http监控参数说明 普通的flume启动命令 bin/flume-ng agent -c conf -f conf/flume-conf.properties -n agent -Dflume.root.logger=INFO,console 日志信息 ...
Flume 的监控方式
因为Flume是基于Java编写的，所以已经提供了基于JMX的服务实现，内置了MBean。 唯一需要做的就是启动JMX服务，使用工具，或写代码，向JMX的monitor服务发送请求，获取其中的MBean。 一、基于JCONSOLE查看MBean 1、在conf/flume.env.sh中进 ...
Flume监控指标项
配置监控 修改flume.env.sh 使用以下脚本 指标项整理 OS监控项 objectName 指标项 说明 java.lang:type=OperatingSystem ...
Flume案例一【监控端口数据】
案例一【监控端口数据】 目标：Flume监控一端Console（控制台），另一端Console发送消息，使被监控端实时显示。 分步实现： 1.创建Flume Agent配置文件flume-telnet.conf 1）创建自己的配置文件 [root@bigdata111 ...
Flume拦截器、监控器
一、拦截器 1、拦截器： 拦截器主要作用在source和channel之间，用于给event设置header消息头，如果没有设置拦截器，则event中只有message。 常见的拦截器 ...
flume记录（2）监控文件和目录，对hdfs操作
监控某个文件：配制如下 监控某个目录：配制如下 写入到HDFS：配制如下 ...
flume消息处理的监控信息使用
Flume现在使用越来越多，在使用过程中难免发现性能瓶颈或者消息丢失的问题。在遇到这些问题的时候，第一想到的是通过java自带命令去分析问题和使用一些日志去定位问题。 Flume在处理消息时自带了很多counter，并可以以JMX、Ganglia、JSON等方式发布出来，在需要的时候，在启动 ...