某Java服務(假設PID=10765)出現了OOM，如何快速定位?

Java服務出現OOM，最常見的原因是：

• 內存確實分配過小，內存確實不夠用;
• 某一個對象被頻繁申請，卻沒有釋放，內存不斷泄漏，導致內存耗盡;
• 某一個資源被頻繁申請，系統資源耗盡，例如：不斷創建線程，不斷發起網絡連接;

更具體的，可以按照以下步驟，使用以下工具排查。

一、確認是不是內存本身就分配過小

方法：jmap -heap 10765

如上圖，可以查看新生代，老生代堆內存的分配大小以及使用情況，看是否本身分配過小。

二、找到最耗內存的對象

方法：jmap -histo:live 10765 | more

如上圖，輸入命令后，會以表格的形式顯示存活對象的信息，并按照所占內存大小排序：

• 實例數;
• 所占內存大小;
• 類名;

是不是很直觀?對于實例數較多，占用內存大小較多的實例/類，相關的代碼就要針對性review了。

畫外音：需要說明的是，jmap -histo:live會執行一次FGC，如果仍無法定位，可dump內存，通過Java內存分析工具MAT(Memory Analyzer Tool)線下進行分析。

上圖中占內存最多的對象是RingBufferLogEvent，共占用內存18M，屬于正常使用范圍。

如果發現某類對象占用內存很大(例如幾個G)，很可能是類對象創建太多，且一直未釋放。例如：

• 申請完資源后，未調用close()或dispose()釋放資源;
• 消費者消費速度慢(或停止消費了)，而生產者不斷往隊列中投遞任務，導致隊列中任務累積過多;

三、確認是否是資源耗盡

工具：

• pstree
• netstat

查看進程創建的線程數，以及網絡連接數，如果資源耗盡，也可能出現OOM。 這里介紹另一種方法，通過

/proc/${PID}/fd 
/proc/${PID}/task 

可以分別查看句柄詳情和線程數。

例如，某一臺線上服務器的sshd進程PID是9339，執行：

如上圖，sshd共占用了四個句柄：

• 0 -> 標準輸入;
• 1 -> 標準輸出;
• 2 -> 標準錯誤輸出;
• 3 -> socket(容易想到是監聽端口);

sshd只有一個主線程PID為9339，并沒有多線程。

所以，只要

ll /proc/${PID}/fd | wc -l 
ll /proc/${PID}/task | wc -l （效果等同pstree -p | wc -l） 

就能知道進程打開的句柄數和線程數。

【本文為51CTO專欄作者“58沈劍”原創稿件，轉載請聯系原作者】

戳這里，看該作者更多好文