原文:一个Flume 异常(Put queue for MemoryTransaction of capacity 100 full)的排查和解决思路

最近在做一个分布式调用链跟踪系统, 在两个地方采用了flume 我使用的flume版本是 . . cdh . . ,一个是宿主系统 ,用flume agent进行日志搜集。 一个是从kafka拉日志分析后写入hbase. 后面这个flume 从kafka拉日志分析后写入flume 用了 台 , 系统上线以后 ,线上抛了一个这样的异常: Caused by: org.apache.flume.Cha ...

2015-12-23 18:42 0 4110 推荐指数:

查看详情

系统运行缓慢,CPU 100%,以及Full GC次数过多问题的排查思路

前言 处理过线上问题的同学基本上都会遇到系统突然运行缓慢,CPU 100%,以及Full GC次数过多的问题。当然,这些问题的最终导致的直观现象就是系统运行缓慢,并且有大量的报警。 本文主要针对系统运行缓慢这一问题,提供该问题的排查思路,从而定位出问题的代码点,进而提供解决该问题的思路 ...

Fri Mar 22 23:35:00 CST 2019 0 1673
一个flume agent异常解决过程记录

今天在使用flume agent的时候,遇到了一个异常, 现把解决的过程记录如下: 问题的背景: 我使用flume agent 来接收从storm topology发送下来的accesslog , 做本地文件落盘。flume配置文件如下: #用于syslog和accesslog的本地 ...

Fri Mar 18 00:02:00 CST 2016 1 5173
解决flume运行中的一个异常问题!

今天在本地测试flume的exec 监控文件 分割的问题!!!遇到各种141异常问题! 怀疑是在切割文件的时候超过了监控文本的时间,导致flume异常退出,,,所以增加了keep-alive 时长,,,他的默认值是3秒,,我把它设置为30秒,,,之后运行,,,,他不再异常 ...

Tue Feb 21 01:47:00 CST 2017 0 5039
服务CPU 100%排查思路

。 二、问题复现   线上系统突然运行缓慢,CPU飙升,甚至到100%,以及Full GC次数过多 ...

Fri May 15 22:35:00 CST 2020 0 941
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM