原文:一個Flume 異常(Put queue for MemoryTransaction of capacity 100 full)的排查和解決思路

最近在做一個分布式調用鏈跟蹤系統, 在兩個地方采用了flume 我使用的flume版本是 . . cdh . . ,一個是宿主系統 ,用flume agent進行日志搜集。 一個是從kafka拉日志分析后寫入hbase. 后面這個flume 從kafka拉日志分析后寫入flume 用了 台 , 系統上線以后 ,線上拋了一個這樣的異常: Caused by: org.apache.flume.Cha ...

2015-12-23 18:42 0 4110 推薦指數:

查看詳情

系統運行緩慢,CPU 100%,以及Full GC次數過多問題的排查思路

前言 處理過線上問題的同學基本上都會遇到系統突然運行緩慢,CPU 100%,以及Full GC次數過多的問題。當然,這些問題的最終導致的直觀現象就是系統運行緩慢,並且有大量的報警。 本文主要針對系統運行緩慢這一問題,提供該問題的排查思路,從而定位出問題的代碼點,進而提供解決該問題的思路 ...

Fri Mar 22 23:35:00 CST 2019 0 1673
一個flume agent異常解決過程記錄

今天在使用flume agent的時候,遇到了一個異常, 現把解決的過程記錄如下: 問題的背景: 我使用flume agent 來接收從storm topology發送下來的accesslog , 做本地文件落盤。flume配置文件如下: #用於syslog和accesslog的本地 ...

Fri Mar 18 00:02:00 CST 2016 1 5173
解決flume運行中的一個異常問題!

今天在本地測試flume的exec 監控文件 分割的問題!!!遇到各種141異常問題! 懷疑是在切割文件的時候超過了監控文本的時間,導致flume異常退出,,,所以增加了keep-alive 時長,,,他的默認值是3秒,,我把它設置為30秒,,,之后運行,,,,他不再異常 ...

Tue Feb 21 01:47:00 CST 2017 0 5039
服務CPU 100%排查思路

。 二、問題復現   線上系統突然運行緩慢,CPU飆升,甚至到100%,以及Full GC次數過多 ...

Fri May 15 22:35:00 CST 2020 0 941
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM