一次zabbix代理队列积压的异常处理
【问题现象】 在查询多个监控网元性能数据时候，发现都有断点，查看采集程序都正常，而队列中有一个代理的队列突然积压了40多万个指标未处理 【处理过程】 1、查看proxy的日志情况，无任何异常信息反馈 2、查看代理对应的mysql，无异常等待时间 3、查看代理 ...
原文：记一次队列积压问题的分析、解决
现象： 同事负责的项目转到我部门，整理服务过程中发现了队列的积压问题。 为了搞清楚积压的严重程度， 对队列任务数每分钟进行一次采样，生成一个走势图， 队列积压情况一目了然，非常严重。 分析： 听了同事对系统的介绍，猜测是mongo性能影响了处理效率，于是针对mongo进行分析 .使用mongotop usr local mongodb bin mongotop host . . . : odds ...
2017-04-26 17:57 2 1439 推荐指数：
相关推荐
消息队列如何解决消息积压问题
转载：消息队列消息积压了怎么办？ 作者： 以梦为码 Q:刚开始是对这个疑问抱有质疑态度的，因为使用消息队列的其中目的就是削峰填谷，来避免高流量时，对下游服务的冲击，所以使用消息队列进行缓冲，下游根据自己的消费能力去消费， 我感觉这就是消息积压本就是使用消息队列的功能，怎么会是问题 ...
如何解决消息队列的过期失效，消息队列的积压问题
大量消息在 mq 里积压了几个小时了还没解决 几千万条数据在 MQ 里积压了七八个小时，从下午 4 点多，积压到了晚上 11 点多。这个是我们真实遇到过的一个场景，确实是线上故障了，这个时候要不然就是修复 consumer 的问题，让它恢复消费速度，然后傻傻的等待几个小时消费完毕。这个肯定不能在 ...
记一次内存溢出问题的排查、分析过程及解决思路
谨以此文献给自学路上的兄弟 起因 这个测试工具的开发已有一段时间了，由于数据量过大，写入数据较慢，导致工具执行耗时较长，所以再次优化了实现方案，进行二阶段的程序开发。 经优化后，200 ...
记一次docker问题定位(perf，iostat等性能分析)
背景 最近参与的项目是基于 OpenStack 提供容器管理能力，丰富公司 IaaS 平台的能力。日常主要工作就是在开源的 novadocker 项目（开源社区已停止开发）基础上进行增强，与公司的其他业务组件进行对接等。 周末给下游部门的 IaaS 平台进行了一次升级，主要升级 ...
记一次ZOOKEEPER集群超时问题分析
CDH安装的ZK，三个节点，基本都是默认配置，一直用得正常，今天出现问题，客户端连接超时6倍时长，默认最大会话超时时间是一分钟。原因分析：1.首先要确认网络正确。确认时钟同步。2.查看现有的配置，基本都是默认配置 JVM配置是1G 有 2g的，不一样3.查看dataDir目录，du -sh .发现 ...
公司内部一次关于kafka消息队列消费积压故障复盘分享
背景现象 1.20晚上8点业务线开始切换LBS相关流量，在之后的1个小时时间内，积压量呈上升趋势，一路到达50W左右，第二天的图没贴出具体是50W数字，以下是第一天晚上的贴图部分。 现象 ...
记一次Pr字幕模糊问题及解决方法
目录 问题： 解决： 问题： 1.导出视频后，发现字幕很模糊 2.发现我们导出时的设置如下图，画面大小为432x244 3.即使暴力修改宽度为1080，导出画面的清晰度也不会有什么变化。 解决： 1.新建序列时应该自定义序列为1080x720，而不应 ...