内存溢出+CPU占用过高:问题排查+解决方案+复盘（超详细分析教程）

置顶 VIP文章 2020-10-24 10:57:06 6204 收藏 212
分类专栏： ● 编程语言 # 【Java】 文章标签： 1024程序员节 OutOfMemory jvm MAT cpu占用高
最后发布:2020-10-24 10:57:06首次发布:2020-10-24 10:57:06
版权声明：本文为博主原创文章，遵循<a href="http://creativecommons.org/licenses/by-sa/4.0/" target="_blank" rel="noopener"> CC 4.0 BY-SA </a>版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zhanghan18333611647/article/details/109255980
版权

前言

最近刚上线了一款社交项目，运行十多天后（运营持续每天推量），发现问题：

  • 系统OOM（资源不能被释放）导致服务器频繁且长时间FGC导致服务器CPU持续飚高
  • 日志中内存溢出:java.lang.OutOfMemoryError: Java heap space
  • 程序十分卡顿，严重影响用户使用

从以下方面，为大家分享此次问题解决流程

  • 问题出现现象
  • 临时解决方案
  • 复现问题
  • 定位问题发生原因
  • 优化代码
  • 优化后进行压测，上线
  • 复盘

学完本博文，你的收获

  • 排查内存溢出的思路
  • 排查内存溢出过程中用到的命令及工具（Linux命令，Eclipse Memory Anaylzer[MAT]）
  • 定位系统内存溢出的代码，并进行优化
  • 此次内存溢出问题复盘

解决方案流程图

当年的春天 CSDN认证博客专家 分布式 Spring Redis
6年Java互联网研发经验，坐标北京；擅长微服务和中间件。
本文为VIP专属文章，单击开通VIP
已标记关键词 清除标记
cpu使用率过高的几个情况
10-12
CPU有时的使用率显示的是百分之九十几甚至跟高，在这里列出了可能的几种情况及其解决办法，
表情包
插入表情
还能输入1000个字符 “速评一下”
上线java应用cpu异常通过mat分析后的结果疑问
08-21
上线的web应用经常会cpu异常超过100%导致应用挂死，生成hprof文件后通过mat分析发现最大嫌疑全部指向的是•org.apache.tomcat.util.threads.TaskThread
JVM内存溢出CPU飙升排查方法
letterss的博客
04-19 422
一、内存不足 查看linux内存使用情况 free -m 查看java 进程/线程对系统的占用情况 top 看堆内存信息 jmap -heap pid 导出dump java堆数据 jmap -dump:live,format=b,file=/dump_.dat pid 打开jvisualVM-》文件-》装入-》堆dump 二、cpu飙升 top命令...
定位python脚本内存占用过多的原因
weixin_34301307的博客
03-28 930
2019独角兽企业重金招聘Python工程师标准>>> ...
国民度No.1，Python到底做了什么？
CSDN学院
01-20 1万+
毫无疑问，Python 是当下最火的编程语言之一。可以说 Python 的崛起，将编程提高了一个层次，它不再只是程序员专用，各个岗位都在学习 Python，导致普及度和国民度瞬间上升，Python 对整个行业来说都是极其有利的。 正如 TIOBE 官方评价：Python 无处不在，其实自 2018 年开始，各行各业便开始布局 Python。 在教育界， 1、自 2018 年 3 月起，在计算机二级考试加入了“Python 语言程序设计”科目； 2、2018 年，浙江省信息技术教材宣布弃用 VB 语言
Python循环脚本占用的内存越来越大怎么解决
01-17
用python写了一个脚本。 用的是while True的循环。 基本内容是一直检测图像中某一个点的颜色，是否是某个颜色，如果是就进行操作。 运行的时候，打开任务管理器，可以看到Python.exe的
通过gc和linux脚本监控内存,防止内存溢出(java.lang.OutOfMemoryErr)
奋斗一生
12-11 329
现象:程序抛出java.lang.OutOfMemoryError. 解决办法:在java启动项中加入 [code="java"] -Xms1800M -Xmx1800M -Xmn600M -Xss512K -XX:PermSize=300M -XX:MaxPermSize=300M -XX:SurvivorRatio=5000 -XX:MaxTenuringThreshold=0 -...
一次 Eclipse MaT工具分析线上某台服务器cpu满载过程
无知者无畏
11-18 217
起因 内部系统，收到客服小姐姐反馈，某个页面的修改功能特别慢，以至于功能无法使用。同时伴随着CPU告警。 至此，赶紧去dump了一份内存报告 (dump会使服务短时间暂停) jmap -dump:format=b,file=mem.bin 29194 下载后，使用Eclipse mat打开，发现有个对象拥有15w多个实例，猜测此处必是问题的根源。 解决 结合代码发现，循环里面有个查询全部的很可...
JceSecurity/BouncyCastleProvider导致JVM内存溢出、CPU过高问题排查
dweizhao的专栏
06-20 4455
问题：用户量3千左右，并且业务没有对外开放，CPU一直居高不下。 分析：初步怀疑开发人员逻辑控制不严谨， 导致死循环，因为业务量不大，用户量不大，不可能出现高并发。 1.通过jstack查找出对应执行线程是Vm Thread 线程,初步怀疑是频繁的GC导致cpu过高。 2.查看堆栈信息 jmap -heap 16190，如下图： 看到年老区已使用86% 3.查看垃圾回
JVM死锁、cpu飙高、内存溢出如何定位
xiaobo5264063的博客
03-13 193
使用jstack定位死锁 命令格式: jstack ${pid} > aa.txt // 获取当前pid所有的线程信息，并输出到aa.txt文件内 创建项目 线程死锁代码 public class LockController { private Object lock1 = new Object(); private Obj...
系统内存溢出问题排查
u014450159的博客
02-27 1686
2018年1月23号凌晨6:00左右，公司向银行推送交易的系统（以下简称推送系统）报出异常java.lang.OutOfMemoryError: Java heap space，随后系统挂掉了，系统的定时任务无法再启动，但因为没有添加监控，未能及时发现异常。当天上午，业务通知有一批交易没有收到应有的结果，查看日志的时候发现推送系统近几个小时都没有打印日志了。尝试使用人去管理启停其定时任务，无效。尝...
linux环境下经常内存溢出的一种解决办法
qq_41966009的博客
05-09 678
首先说一下，内存经常溢出，爆内存不一定是因为batch_size过大，也有可能是模型没有加载上。弄了一天才把这个问题解决 问题： 我在使用paddlehub的下面这段函数时，经常爆内存 paddlehub.Module(name='deeplabv3p_xception65_humanseg') 简单说一下过程 //我先用humanseg加载模型，这个deeplabv3p_xception65_humanseg //模型如果Linux环境未安装，则自动安装 humanseg = paddlehub.
CPU过高及OOM
07-11 137
CPU过高 1.先用top命令,找到cpu占用最高的进程 PID 2.再用ps -mp pid -o THREAD,tid,time 查询进程中,那个线程的cpu占用率高 记住TID 3.jstack 29099 >> xxx.log 打印出该进程下线程日志 4.sz xxx.log 将日志文件下载到本地 5.将查找到的 线程占用最高的 tid 上上上图中 29108 转成16进制 — 71b4 6.打开下载好的 xxx.log 通过 查找方式 找到 对应线程 进行排查 原因：
跑时间长了，电脑内存炸了
01-07
<div><p>log</p> <pre><code> HTTPConnectionPool(host='192.168.177.101', port=7912): Max retries exceeded with url: /screenshot/0 (Caused by ConnectTimeoutError(<urllib3.connection.httpconnection object at>, 'Connection to 192.168.177.101 timed out. (connect timeout=10)')) </urllib3.connection.httpconnection></code></pre> <h2>Versions (版本)</h2> <p>Name: uiautomator2 Version: 0.1.4.dev43</p> <p>电脑环境 window7</p> <h2>Issue and steps to reproduce (复现步骤)</h2> <p>大概有300条的case，然后每次执行到两百多条就直接炸了（电脑直接内存不足导致模拟器直接挂掉，然后就连接超时了），看log好像有说到截图，不知道是不是截图的问题，我case里面截图比较多，每条case执行都要截两次图 截图后也基本没有等待 直接就是跑下一条case</p> <ul><li>手机型号 模拟器</li></ul><p>该提问来源于开源项目：openatx/uiautomator2</p></div>
程序跑一段时间崩溃，出现严重问题,求高手!!!
06-01
linux 平台：海思3515 内核版本：linux 2.6.24 问题： 程序跑了一段时间后都会出现固定的问题，打印信息如下： MMB LEAK(pid=667): 0xCB54D000, 3276
Python程序占用内存不断增加
leogo17的博客
08-18 1万+
      最近在跑python程序时，出现占用的内存不断增加，从最开始的2GB左右，一直增加，达到几十GB，导致服务器非常卡顿。       通过调试，最终发现：在debug的时候，写了一些调用matplotlib来画图的程序，在正式运行的时候没有注释这一部分代码，导致一直在创建新的画图界面。注释这些代码即可解决内存不断增加的问题。...
写了一个处理大量文本的程序，发现跑一段时间以后大量的吃掉内存。
04-18
有什么好的方法能发现是哪部分代码在源源不断吃掉我的内存？
python程序越跑越慢与内存泄漏
qq_32791307的博客
05-25 5168
问题：运行python程序的时候，在100轮以后时间从初始的3S一次，慢慢变为1分钟一次，越来越慢。 处理方法：查询资料得，这种问题的出现基本是由于程序内存泄漏。所以需要监测内存占用情况。 监测内存需要： memory_profiler 与 psutil 1. pip installmemory_profiler pip installpsutil 2. 在需要...
正式服务器内存溢出追踪原因并解决（OOM）
qq_38517630的博客
05-22 1642
实际场景：正式服务器以前一直使用正常，今天突然报内存溢出，tomcat重启后还是内存溢出 原因定位记录：（注 下面截图都是正常情况下的截图） 1.top 查看 java pid 2.查看java堆详细信息 jmap -heap pid JVM基本结构图： 链接: https://blog.csdn.net/bluetjs/article/details/52874852. Java中的内存分配： Java程序在运行时，需要在内存中的分配空间。为了提高运算效率，就对数据进行了不同空间的划分，因为每
JVM性能调优监控工具jps、jstack、jmap、jhat、jstat使用详解
Asp.net2.0开发专栏
04-22 1101
JDK本身提供了很多方便的JVM性能调优监控工具，除了集成式的VisualVM和jConsole外，还有jps、jstack、jmap、jhat、jstat等小巧的工具，本博客希望能起抛砖引玉之用，让大家能开始对JVM性能调优的常用工具有所了解。 现实企业级Java开发中，有时候我们会碰到下面这些问题：OutOfMemoryError，内存不足内存泄露线程死锁锁争用（Lock Conten
©️2020 CSDN 皮肤主题: 博客之星2020 设计师:CY__0809 返回首页
实付 9.90元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、C币套餐、付费专栏及课程。

余额充值