之前线上发生了一个很诡异的异常，网上各种搜索、排查，都没有找到问题，给大家分享一下。 大概在 2 月份的时候，我们的某个应用整合了中间件的 kafka 客户端，发布到灰度和蓝节点进行观察，然后就发现线

本文总结了一些Java应用线上常见问题的定位步骤，分享的主要目的是想让对线上问题接触少的同学有个预先认知，免得在遇到实际问题时手忙脚乱。毕竟作者自己也是从手忙脚乱时走过来的。 只不过这里先提示一下。在线上应急过程中要记住，只有一个总体目标：「尽快恢复服务，消除影响」。 不管处于…

在高并发下，Java程序的GC问题属于很典型的一类问题，带来的影响往往会被进一步放大。不管是「GC频率过快」还是「GC耗时太长」，由于GC期间都存在Stop The World问题，因此很容易导致服务超时，引发性能问题。 我们团队负责的广告系统承接了比较大的C端流量，平峰期间的…

这个命令可以快速查看机器的负载情况。在Linux系统中，这些数据表示等待CPU资源的进程和阻塞在不可中断IO进程（进程状态为D）的数量。这些数据可以让我们对系统资源使用有一个宏观的了解。命令的输出分别表示1分钟、5分钟、15分钟的平均负载情况。通过这三个数据，可以了解服务器负载是...

上篇《Java 服务，内存 OOM 问题如何快速定位？》发布后，有朋友在评论留言，问 CPU100% 的性能问题，如何找到相关服务，如何定位问题代码，也非常考验技术人的功底，今天简单说下思路。 假设，服务器上部署了若干 Java 站点服务，以及若干 Java 微服务，突然收到运…

本系列共三篇文章， 本文是系列第2篇——进阶篇，详细讲解 MAT 各种工具的核心功能、用法、适用场景，并在具体实战场景下讲解帮大家学习如何针对各类内存问题。 《JVM 内存分析工具 MAT 的深度讲解与实践——入门篇》 介绍 MAT 产品功能、基础概念、与其他工具对比、Quic…

Arthas是一款由阿里巴巴开源的Java应用程序诊断工具，它功能强大，且不需要对原有的应用做任何改动，即可帮助开发者全方位地观测Java应用程序的运行状态，特别是在线上服务不便于调试，问题复现概率低的场景下极大地方便了开发人员的调试工作，因此深受集团内外的开发者喜爱，笔者在工…

使用Java语言开发应用程序，虽然JVM帮我们进行了GC收集、清除工作；但是使用不当的话，还是会导致某些对象常驻堆空间无法给垃圾收集器清除，导致内存泄露、内存溢出等情况，今天盘点一下在项目中进行内存泄露分析和GC分析的一些常用、好用的工具。 The Eclipse Memory…

前段时间我们接入了 ELK 公司出品的 Elastic-APM 作为全链路监控平台，终结了我好几年前撸的字节码注入全链路监控平台。前段时间有一个业务在启动过程中，会概率性出现大量线程阻塞，导致可对外提供服务的 HTTP 线程非常少，流量进来以后马上出现 HTTP 线程耗尽，健康…