原文:记一次dubbo服务发现导致的OOM

平凡的下午,我们突然收到大量的线上告警:应用A的老年代内存使用率大于 。登陆到监控管理平台可以看到 点半之后该应用的老年代内存使用率一路飙升,直逼 ,接着年轻代也一路上升 我们查看了一下进来的请求也很平稳,并没有突然爆发,那这个地方的罪魁祸首会是谁呢 为了方便读者接下来的阅读,在介绍这次故障之前,我们首先介绍一下我司的dubbo服务发现的流程。 dubbo服务发现流程 我们的开发人员在使用远程服 ...

2020-10-30 13:46 1 400 推荐指数:

查看详情

一次Dubbo服务注册异常

公司项目重构,把dubbo版本从2.5.8升级为2.6.2。升级后在本地运行一点问题都没有;可是通过公司自研的发布系统将项目发布到测试环境的linux服务器下面后,出现了dubbo服务未注册的现象。刚出现这问题,大家都一脸懵逼,毕竟在本地跑起来非常顺畅。但问题总是要解决 ...

Wed Nov 07 22:52:00 CST 2018 1 2209
一次dubbo服务的简单使用

现在接触的项目均由webservice的调用方式转为dubbo调用了,所想着自己走一下相关流程,亲身操作一下java服务使用dubbo框架进行调用。 先简单说说dubbo与webservice的区别,两者基于的通信协议不通,dubbo基于rpc:(Remote Procedure Call ...

Tue Oct 30 23:25:00 CST 2018 0 1171
一次jvm oom 导致docker容器频繁重启问题排查

应用部署在docker容器中,日志无报错,docker却有多次重启记录,Nginx监控报警 过程: 1.执行top命令查看内存占用情况    很干净的容器,只有java进程在运行 2 ...

Tue Oct 13 00:51:00 CST 2020 0 879
一次 android 线上 oom 问题

背景 公司的主打产品是一款跨平台的 App,我的部门负责为它提供底层的 sdk 用于数据传输,我负责的是 Adnroid 端的 sdk 开发。 sdk 并不直接加载在 App 主进程,而是隔离在一 ...

Mon Nov 29 17:54:00 CST 2021 1 297
一次线上 OOM 和性能优化

大家好,我是鸭血粉丝(大家会亲切的喊我 「阿粉」),是一位喜欢吃鸭血粉丝的程序员,回想起之前线上出现 OOM 的场景,毕竟当时是第一次遇到这么 紧脏 的大事,要好好记录下来。 1 事情回顾 在某次周五,通过 Grafana 监控,发现线上环境突然出现CPU和内存飙升的情况: 但是看到网络 ...

Thu Jan 02 05:44:00 CST 2020 1 973
OOM一次线上OOM解决全流程

一、OOM背景   疫情期间,大家都开始了远程办公。刚开始不适应,最后感觉还挺好的,不用每天挤地铁,住8平米的出租屋。   忽然有一天,系统报警邮件来了,运维也在群里艾特我,系统OOM了。其实写Java的同学如果自己负责的系统出现了OOM,是很尴尬的事情。   毕竟也是骨灰级玩家了,不慌不忙 ...

Mon Feb 24 21:03:00 CST 2020 1 1271
一次dubbo服务丢失的问题排查

主要环境与用到的(关键)组件: 首先是服务报错: 很多使用过dubbo的同学对这个报错信息应该都不陌生,一般情况下,如果没有配置好生产端、消费端或者注册中心,启动的时候就会报这个错。但这里的情况是,消费端和生产端都已经正常运行了一段时间了,大概10天左右,突然报 ...

Thu Feb 24 17:42:00 CST 2022 0 2615
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM