其他性能文章 | HeapDump性能社区

内存过载

【活动结果公布：兑奖见置顶评论】每日一签到，解锁你的PerfMa壕礼

Top命令是Linux 系统下常用的监控工具，用于实时获取进程级别的 CPU 或内存使用情况。XPocket中的Top_X为Linux Top的增强版，可以显示CPU占用率/负载，CPU及内存进程使用

小子z3年前

17003

其他

活动

签到

积分

叮......Perfma达人福利发车啦！社区每日签到解锁活动上线啦~除了每日签到必得积分奖励外，还为大家增加了壕礼相赠、解锁Perfma终极大奖等环节奖励 ~来Perfma社区留下你的签到足迹，告诉

堆堆3年前

16818

其他

又发现一个导致JVM物理内存消耗大的Bug(已提交Patch)

patch

概述最近我们公司在帮一个客户查一个JVM的问题(JDK1.8.0_191-b12)，发现一个系统老是被OS Kill掉，是内存泄露导致的。在查的过程中，阴差阳错地发现了JVM另外的一个Bug。这个B

15707

其他

分享一次排查CLOSE_WAIT过多的经验

TCP

CLOSE_WAIT

网络

作者：踩刀诗人原文链接：https://www.cnblogs.com/chopper-poet/p/14618391.html 问题背景某日下午有测试人员急匆匆的跑来跟我反馈：“有客户反馈供应商附件

feininan3年前

16029

操作系统

LONG究竟有多长，从皇帝的新衣到海康SDK

操作系统

CPU 优化高级篇：Java CPU 高的原因和排查方法：如何定位Java 消耗CPU最多的线程

汇编

转眼之间初中毕业30年了，但我仍清楚的记得初中英语的一篇课文，题目叫《皇帝的新装》（“The king’s new clothes”）。这篇课文的前两句话是：”Long long ago, there

张银奎5年前

15505

其他

jstack

线程

之前有朋友反馈说发的内容希望有个梯度，逐步加深，前面发了几篇关于jvm源码分析的文章，可能我觉得我已经把内容写得浅显易懂了，但是对于某些没怎么接触的同学来说还是比较难理解，这个我以后慢慢改进吧，今天发

记一次日志pattern参数设置不合理导致高CPU问题的排查

16144

其他

日志

爬栈

此问题是在为客户的系统进行压测时发现的，为了降低性能风险，对其进行了分析和改进。分享此案例也希望能给同学们一些启发和提醒。问题现象：压测过程中发现应用服务器CPU消耗较高分析过程：首先根据链路/

电梯战神3年前

15185

其他

内存泄漏（增长）火焰图

本文总结了在分析内存增长和内存泄漏问题用到的4种追踪方法得到有关内存使用情况的代码路径，使用栈追踪技术对代码路径进行检查，并且会以火焰图的形式把它们可视化输出，在Linux上演示分析过程，随后概述其它系统的情况。

17935

其他

概述上篇文章讲了JVM在GC上的一个设计缺陷，揪出一个导致GC慢慢变长的JVM设计缺陷，可能有不少人还是没怎么看明白的，今天准备讲的大家应该都很容易看明白本文其实很犹豫写不写，因为感觉没有

13511

Java虚拟机

线上有一个非常繁忙的服务的 JVM 进程 CPU 经常跑到 100% 以上，下面写了一下排查的过程。通过阅读这篇文章你会了解到下面这些知识。- Java 程序 CPU 占用高的排查思路- 可能造成线上

挖坑的张师傅4年前

14374

Java语言

Java8 Stream源码分析

stream

Stream Stream是在Java SE 8 API添加的用于增强集合的操作接口，可以让你以一种声明的方式处理集合数据。将要处理的集合看作一种流的创建者，将集合内部的元素转换为流并且在管道中传

小蓝鲸5年前

13420

Java语言

谨防JDK8重复类定义造成的内存泄漏

jdk

概述如今JDK8成了主流，大家都紧锣密鼓地进行着升级，享受着JDK8带来的各种便利，然而有时候升级并没有那么顺利？比如说今天要说的这个问题。我们都知道JDK8在内存模型上最大的改变是，放弃了Perm

11327

Java虚拟机

spring boot 引起的 “堆外内存泄漏”

背景组内一个项目最近一直报swap区域使用过高异常，笔者被叫去帮忙查看原因。发现配置的4G堆内内存，但是实际使用的物理内存高达7G，确实有点不正常，JVM参数配置是：```java-XX:Metasp

朱纪兵4年前

14572

Java虚拟机

从CMS到G1：LinkedIn个人主页调优实战

cms

单次耗时长

LinkedIn中的个人主页是访问量最多的页面之一，它允许其他人访问你的个人主页，从而了解你的专业技能，经验和兴趣等：所以，确保用户访问主页时以最快的速度返回是非常重要的。这篇文章，将谈论Li

阿飞Javaer5年前

12505

其他

一次压缩引发堆外内存过高的教训

改善 Kubernetes 上的 JVM 预热问题

一、项目介绍lz_rec_push_kafka_consume该项目通过kafka与算法进行交互，通过push推荐平台（lz_rec_push_platform）预生成消息体。二、问题背景发现项目的

onedaylin4年前

13606

其他

这几天，一直在为Java的“内存泄露”问题纠结。Java应用程序占用的内存在不断的、有规律的上涨，最终超过了监控阈值。福尔摩斯不得不出手了！分析内存泄露的一般步骤如果发现Java应用程序占用的内

technology4年前

13130

Java语言

前言JVM的堆外内存泄露的定位一直是个比较棘手的问题。此次的Bug查找从堆内内存的泄露反推出堆外内存，同时对物理内存的使用做了定量的分析，从而实锤了Bug的源头。笔者将此Bug分析的过程写成博客，以飨

巡山小汪4年前

13071

其他

Kubernetes

JVM 预热是一个非常头疼而又难解决的问题。本文讨论了在运行在 Kubernetes 集群中的 Java 服务如何解决 JVM 预热问题的一些方法和经验。作者：Vikas Kumar 翻译：Bach

feininan3年前

11703

其他

最近2周开始接手apache flink全链路监控数据的作业，包括指标统计，业务规则匹配等逻辑，计算结果实时写入elasticsearch. 昨天遇到生产环境有作业无法正常重启的问题，我负责对这个问题

a kobe fan4年前

11835

Java语言

JAVA线上故障排查套路

故障排查

线上故障主要会包括cpu、磁盘、内存以及网络问题，而大多数故障可能会包含不止一个层面的问题，所以进行排查时候尽量四个方面依次排查一遍。同时例如jstack、jmap等工具也是不囿于一个方面的问题的，基

fredal4年前

11374

Java语言

使用Go语言实现Attach到目标JVM进程

Attach 机制

进程间通信

0x00 Java Attach API的基本使用在JVM运行时加载一个Agent的jar包是Java agent的一种更加灵活的实现方式，因为动态Attach时不需要停止目标JVM进程，这个特性给J

kenel4年前

10997

Java虚拟机

使用NMT和pmap解决JVM资源泄漏问题

编者按：笔者使用JDK自带的内存跟踪工具NMT和Linux自带的pmap解决了一个非常典型的资源泄漏问题。这个资源泄漏是由于Java程序员不正确的使用Java API导致的，使用Files.list打

毕昇JDK社区3年前

13567

Java虚拟机

最近我们在测试把 APM 平台迁移到 ES APM，有同学反馈了一个有意思的现象，部署在 docker 中 jar 包项目，在新版 APM 里进程启动完就退出了，被 k8s 中无限重启。这篇文章写了一

挖坑的张师傅4年前

10918

Java语言

没想到，这么简单的线程池用法，深藏这么多坑

线程池

又又又踩坑了生产有个对账系统，每天需要从渠道端下载对账文件，然后开始日终对账。这个系统已经运行了很久，前两天突然收到短信预警，没有获取渠道端对账文件。本以为又是渠道端搞事情，上去一排查才发现，所有下载

楼下小黑哥4年前

10793

操作系统

我都知道操作系统的一个重要功能就是进行进程管理，而进程管理就是在合适的时机选择合适的进程来执行，在单个cpu运行队列上各个进程宏观并行微观串行执行，多个cpu运行队列上的各个进程之间完全的并行执行。进

技术小助手4年前

11808

操作系统

浅谈 Linux 高负载的系统化分析

Load

讲解 Linux Load 高如何排查的话题属于老生常谈了，但多数文章只是聚焦了几个点，缺少整体排查思路的介绍。所谓 “授人以鱼不如授人以渔"。本文试图建立一个方法和套路，来帮助读者对 Load 高问

JVM源码分析之警惕存在内存泄漏风险的FinalReference(增强版)

10979

Java虚拟机

概述JAVA对象引用体系除了强引用之外，出于对性能、可扩展性等方面考虑还特地实现了四种其他引用：SoftReference、WeakReference、PhantomReference、FinalRe

11625

Java语言

一次I/O问题引发的P0重大故障

这是前段时间发的一篇文章，很多读者反馈，文章没有揭示故障发生的详细原因。本次在文中加上故障的具体原因（下面黑体字部分），再推一次。几年前的一个下午，公司里码农们正在安静地敲着代码，突然很多人的手机同时

冯涛_二马读书4年前

11564

中间件

一次 Docker 容器内大量僵尸进程排查分析

docker

进程

前段时间线上的一个使用 Google Puppeteer 生成图片的服务炸了，每个 docker 容器内都有几千个孤儿僵死进程没有回收，如下图所示。这篇文章比较长，主要就讲了下面这几个问题。- 什么情

挖坑的张师傅4年前

12595

其他

一次“内存泄漏”引发的血案

对性能不佳的Ark Server进行了改造和重写。重编发布一段时间后，结果发现新发布的Svr的机器内存一直在上涨。如下图示：观察后，第一反应是完了，一定存在内存泄露。花了3、4天时间，使用各种办法进行

technology4年前

10827

Java虚拟机

GC 实战—浮动内存导致的 CPU 过高调优

由于接入的应用越来越多，对系统性能要求越来越高，提高系统的吞吐率，以及提升性能，是我们春节战役期间必须要做的事情。系统的性能优化不单单是对 JVM 的参数调优，也不是某一段代码的改造，而是一个系统的工

10820

其他

现象- QA同学反映登录不上服务器排查问题1--日志级别- 查看log,发现玩家登录的时候抛出了一个java.lang.OutOfMemoryError - 大概代码是向Redis序列化一个Pla

landon304年前

11143

其他

Prometheus时序数据库-磁盘中的存储结构

储存结构

Prometheus

时序数据库

前言之前的文章里，笔者详细描述了监控数据在Prometheus内存中的结构。而其在磁盘中的存储结构，也是非常有意思的,关于这部分内容，将在本篇文章进行阐述。磁盘目录结构首先我们来看Prometheu

巡山小汪3年前

11114

Java语言

久等了，网传字节跳动总结的设计模式出版了！

设计模式

字节跳动

作者：小傅哥博客：[https://bugstack.cn](https://bugstack.cn)沉淀、分享、成长，让自己和他人都能有所收获！😄 一、前言`来自延迟满足的幸福`可能你的生活里很多

小傅哥 | bugstack.cn3年前

10229

其他

那些吃CPU的大户

JDK11现存性能bug(JDK-8221393)深度解析

最近沉浸在代码的世界里，处于两耳不闻窗外事的状态。今晚偶有闲暇，看了一眼任务管理器，IDLE进程的时间居然有800多小时，还有多个进程的CPU净时间达到小时级别。如下图所示，IDLE进程的CPU净时间

张银奎4年前

10623

其他

基于CAP模型设计企业级真正高可用的分布式锁

cap

分布式锁

CAP定律剖析2000年Eric Brewer教授提出CAP猜想，2年后CAP猜想被Seth Gilbert和Nancy Lynch从理论上证明。CAP是Consitency（强一致性）、Availa

孙玄｜奈学教育4年前

10324

其他

最近我在回顾思考（写 PPT），整理了现状，发现了这个问题存在多时，经过一番波折，最终确定了元凶和相对可行的解决方案，因此分享一下排查历程，希望能够给大家一些借鉴的经验。时间线：- 在上 Kubern

煎鱼4年前

11264

Java虚拟机

bug

我的程序跑了60多小时，就是为了让你看一眼JDK的BUG导致的内存泄漏

这是一篇鸽了很久的博客，因为博客内容和素材早就准备差不多了，但就是一直懒得整理，今天终于下定决心终于整理出来了，这也是这个bug [JDK-8221393](https://bugs.openjdk.

xindoo4年前

9791

Java语言

jdk

从一个BUG说起前段时间翻到了一个 JDK 有点意思的 [BUG](https://bugs.java.com/bugdatabase/view_bug.do?bug_id=8137185)，带大家一

惊：Dubbo居然有必现StackOverflowError的Bug

9637

中间件

dubbo

StackOverFlow

栈溢出

说明：本文场景基于dubbo-2.5.3版本。如果你对StackOverflowError有一定的了解，就可以知道出现这个问题的主要原因就是调用栈太深，比如常见的无限递归调用。那本文要介绍的Dub

阿飞Javaer5年前

10268

中间件

前言dubbo是一个成熟且被广泛运用的框架。饶是如此,在某些极端条件下基于dubbo的应用还会出现无法重连zookeeper的问题。由于此问题容易导致比较大的故障，所以笔者费了一番功夫去定位，现将排查

巡山小汪3年前

10045

Java语言

一次诡异的垃圾回收耗时问题排查实践

之前的博文中说过最近在查一个问题，花费了近两个星期，问题算是有了一个小结，是时候总结一下了。排查过程走了很多弯路，由于眼界和知识储备问题，也进入了一些思维误区，希望此问题能以后再查询此类问题时能有所警

震惊！线上四台机器同一时间全部 OOM，到底发生了什么？

9574

Java语言

消失的Java进程-Linux OOM Killer

oom

案发现场昨天晚上突然短信收到 APM （即 Application Performance Management 的简称，我们内部自己搭建了这样一套系统来对应用的性能、可靠性进行线上的监控和预警的一种

geekoftaste4年前

9725

Java虚拟机

oom

刨根问底——记一次 OOM 试验造成的电脑雪崩引发的思考

进程

在一台虚拟机上执行docker java应用，每隔一段时间就会出现java进程消失、而且没有任何jvm error log的情况。略一寻思，应该是遇到网上常说的Linux OOM的情况：虚拟机10G，

兔兔七4年前

10335

Java虚拟机

oom

问题初现----电脑雪崩在写「垃圾回收-实战篇」时，按书中的一个例子做了一次实验，我觉得涉及的知识点挺多的，所以单独拎出来与大家共享一下，相信大家看完肯定有收获。画外音：尽信书不如无书，对每一个例子

geekoftaste4年前

9082

Java语言

什么会导致Java应用程序的CPU使用率飙升？

问题无限循环的while会导致CPU使用率飙升吗？经常使用Young GC会导致CPU占用率飙升吗？具有大量线程的应用程序的CPU使用率是否较高？CPU使用率高的应用程序的线程数是多少？处于BLOC

空无4年前

10568

Java语言

如何使用Eclipse内存分析工具定位内存泄漏

MAT

本文以我司生产环境Java应用内存泄露为案例进行分析，讲解如何使用Eclipse的MAT分析定位问题背景11月10号晚上8点收到报警邮件，一看是OOM打开公司监控系统查看应用各项指标发现JVM中老年

Java老K4年前

10353

其他

问题来源一次生产事故，由于一次性从数据库查询过多数据导致线程 OOM：Java heap space 异常（千万级表，JVM堆内存2G），但是在线程OOM发生时，java进程却没有立即挂掉。不符合所谓

兔兔七4年前

10070

Java虚拟机

JVM源码分析之SystemGC完全解读

SystemGC

概述 JVM的GC一般情况下是JVM本身根据一定的条件触发的，不过我们还是可以做一些人为的触发，比如通过jvmti做强制GC，通过System.gc触发，还可以通过jmap来触发等，针对每个场景其实我

10276

Java虚拟机

强如 Disruptor 也发生内存溢出？

前言```OutOfMemoryError ```问题相信很多朋友都遇到过，相对于常见的业务异常（数组越界、空指针等）来说这类问题是很难定位和解决的。本文以最近碰到的一次线上内存溢出的定位、解决问题的

crossoverJie4年前

9826

其他

CPU上下文切换导致服务雪崩

上下文切换

事故描述某线上web服务流量突增，导致整个应用雪崩。雪崩期间，线上服务器登录困难，只能联系运维人员，在nginx层拒绝部分流量之后，重启服务问题才能得以解决。故障查找过程首先，发现流量突增，并且呈现

朱纪兵4年前

9363

中间件

以下文章来源于匠心零度，作者零度冰炫在学习Netty的时候，ByteBuf随处可见，但是如何高效分配ByteBuf还是很复杂的，Netty的池化内存分配这块还是比较难的，很多人学习过，看过但是还是

占小狼5年前

10211

操作系统

当Linux内核遭遇鲨鱼—kernelshark

内核

kernelshark

之前小弟一直在宣传推广火焰图，结果是很多童鞋凡事都用火焰图。说实话，火焰图特别适合分析运行时热点（无论是on-cpu、off-cpu、还是内存等，火焰图的想象力可以无穷放大），但是你要分析一个的如果是

9441

Java语言

if 快还是 switch 快？HashMap 的初始化 size 要不要指定，指定之后性能可以提高多少？各种序列化方法哪个耗时更短？无论出自何种原因需要进行性能评估，量化指标总是必要的。在大部分场合

武培轩3年前

9368

操作系统

从猫蛇之战再看内核戏CPU

内核

连续写了几天的代码，有些疲倦，吃过晚饭，换个工作方式，继续和大家聊猫蛇之战。蛇不仅丑陋，而且可能伤人害命，是邪恶的象征。猫与蛇战，代表着讨伐奸邪，是正义之战。猫与蛇战，技艺娴熟，举重若轻，叫人拍手叫绝

张银奎4年前

9261

其他

大家好，我是坤哥安全问题往往被大家忽视，但它轻则导致公司用户数据泄露引发严重的舆论危机，重则导致数据被破坏导致公司破产，所以安全问题一定要重视，不过这类问题一旦出现，由于大家经验比较少，往往很难入手，今天就给大家带来一篇服务器被入侵的排查思路，相信大家看了肯定有收获！下文中的，给文件和目录加锁

子非鱼_3658772年前

9921

Java虚拟机

去哪儿国内酒店稳定性治理实践之缓存治理

缓存治理

背景2019 年 9 月，我们连续遇到几次与缓存相关的故障：1. DBA 运维失误，导致我们存储在 redis 里的核心基础数据被清空。由于无法正常提供报价，出现 ATP（订单量骤降）故障，之后通过定

8831

Java语言

前几天，有个朋友在微信上找我。他问：why哥，在吗？我说：发生肾么事了？他啪的一下就提了一个问题啊，很快。我大意了，随意瞅了一眼，这题不是很简单吗？结果没想到里面还隐藏着一篇文章。故事，得从这个问题说

why技术3年前

9243

其他

一次艰难的内存泄露排查，BeanUtils的锅