成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

Node.js 中內存泄漏分析

安全 漏洞
內存泄漏(Memory Leak)指由于疏忽或錯誤造成程序未能釋放已經不再使用的內存的情況。如果內存泄漏的位置比較關鍵,那么隨著處理的進行可能持有越來越多的無用內存,這些無用的內存變多會引起服務器響應速度變慢,嚴重的情況下導致內存達到某個極限(可能是進程的上限,如 v8 的上限;也可能是系統可提供的內存上限)會使得應用程序崩潰。

內存泄漏(Memory Leak)指由于疏忽或錯誤造成程序未能釋放已經不再使用的內存的情況。如果內存泄漏的位置比較關鍵,那么隨著處理的進行可能持有越來越多的無用內存,這些無用的內存變多會引起服務器響應速度變慢,嚴重的情況下導致內存達到某個極限(可能是進程的上限,如 v8 的上限;也可能是系統可提供的內存上限)會使得應用程序崩潰。

傳統的 C/C++ 中存在野指針,對象用完之后未釋放等情況導致的內存泄漏。而在使用虛擬機執行的語言中如 Java、JavaScript 由于使用了 GC (Garbage Collection,垃圾回收)機制自動釋放內存,使得程序員的精力得到的極大的解放,不用再像傳統語言那樣時刻對于內存的釋放而戰戰兢兢。

但是,即便有了 GC 機制可以自動釋放,但這并不意味這內存泄漏的問題不存在了。內存泄漏依舊是開發者們不能繞過的一個問題,今天讓我們來了解如何分析 Node.js 中的內存泄漏。

GC in Node.js

Node.js 使用 V8 作為 JavaScript 的執行引擎,所以討論 Node.js 的 GC 情況就等于在討論 V8 的 GC。在 V8 中一個對象的內存是否被釋放,是看程序中是否還有地方持有改對象的引用。

在 V8 中,每次 GC 時,是根據 root 對象 (瀏覽器環境下的 window,Node.js 環境下的 global ) 依次梳理對象的引用,如果能從 root 的引用鏈到達訪問,V8 就會將其標記為可到達對象,反之為不可到達對象。被標記為不可到達對象(即無引用的對象)后就會被 V8 回收。更多細節,可以參見 alinode 的 解讀 V8 GC。

了解上述的點之后,你就會知道,在 Node.js 中內存泄露的原因就是本該被清除的對象,被可到達對象引用以后,未被正確的清除而常駐內存。

內存泄漏的幾種情況

一、全局變量

 

  1. a = 10;  
  2. //未聲明對象。  
  3. global.b = 11;  
  4. //全局變量引用 

這種比較簡單的原因,全局變量直接掛在 root 對象上,不會被清除掉。

二、閉包

 

  1. function out() {  
  2. const bigData = new Buffer(100);  
  3. inner = function () {  
  4. void bigData;  
  5.  

閉包會引用到父級函數中的變量,如果閉包未釋放,就會導致內存泄漏。上面例子是 inner 直接掛在了 root 上,那么每次執行 out 函數所產生的 bigData 都不會釋放,從而導致內存泄漏。

需要注意的是,這里舉得例子只是簡單的將引用掛在全局對象上,實際的業務情況可能是掛在某個可以從 root 追溯到的對象上導致的。

三、事件監聽

Node.js 的事件監聽也可能出現的內存泄漏。例如對同一個事件重復監聽,忘記移除(removeListener),將造成內存泄漏。這種情況很容易在復用對象上添加事件時出現,所以事件重復監聽可能收到如下警告:

  1. (node:2752) Warning: Possible EventEmitter memory leak detected。11 haha listeners added。Use emitter。setMaxListeners() to increase limit 

例如,Node.js 中 Agent 的 keepAlive 為 true 時,可能造成的內存泄漏。當 Agent keepAlive 為 true 的時候,將會復用之前使用過的 socket,如果在 socket 上添加事件監聽,忘記清除的話,因為 socket 的復用,將導致事件重復監聽從而產生內存泄漏。

原理上與前一個添加事件監聽的時候忘了清除是一樣的。在使用 Node.js 的 http 模塊時,不通過 keepAlive 復用是沒有問題的,復用了以后就會可能產生內存泄漏。所以,你需要了解添加事件監聽的對象的生命周期,并注意自行移除。

關于這個問題的實例,可以看 Github 上的 issues(node Agent keepAlive 內存泄漏)

四、其他原因

還有一些其他的情況可能會導致內存泄漏,比如緩存。在使用緩存的時候,得清楚緩存的對象的多少,如果緩存對象非常多,得做限制***緩存數量處理。還有就是非常占用 CPU 的代碼也會導致內存泄漏,服務器在運行的時候,如果有高 CPU 的同步代碼,因為Node.js 是單線程的,所以不能處理處理請求,請求堆積導致內存占用過高。

定位內存泄漏

一、重現內存泄漏情況

想要定位內存泄漏,通常會有兩種情況:

  1. 對于只要正常使用就可以重現的內存泄漏,這是很簡單的情況只要在測試環境模擬就可以排查了。
  2. 對于偶然的內存泄漏,一般會與特殊的輸入有關系。想穩定重現這種輸入是很耗時的過程。如果不能通過代碼的日志定位到這個特殊的輸入,那么推薦去生產環境打印內存快照了。需要注意的是,打印內存快照是很耗 CPU 的操作,可能會對線上業務造成影響。

快照工具推薦使用 heapdump 用來保存內存快照,使用 devtool 來查看內存快照。使用 heapdump 保存內存快照時,只會有 Node.js 環境中的對象,不會受到干擾(如果使用 node-inspector 的話,快照中會有前端的變量干擾)。

PS:安裝 heapdump 在某些 Node.js 版本上可能出錯,建議使用 npm install heapdump -target=Node.js 版本來安裝。

二、打印內存快照

將 heapdump 引入代碼中,使用 heapdump.writeSnapshot 就可以打印內存快照了了。為了減少正常變量的干擾,可以在打印內存快照之前會調用主動釋放內存的 gc() 函數(啟動時加上 –expose-gc 參數即可開啟)。

 

  1. const heapdump = require('heapdump');  
  2. const save = function () { 
  3.   gc(); 
  4.   heapdump.writeSnapshot('./' + Date.now() + '.heapsnapshot'); 

在打印線上的代碼的時候,建議按照內存增長情況來打印快照。heapdump 可以使用 kill 向程序發送信號來打印內存快照(只在 *nix 系統上提供)。

  1. kill -USR2  

推薦打印 3 個內存快照,一個是內存泄漏之前的內存快照,一個是少量測試以后的內存快照,還有一個是多次測試以后的內存快照。

***個內存快照作為對比,來查看在測試后有哪些對象增長。在內存泄漏不明顯的情況下,可以與大量測試以后的內存快照對比,這樣能更容易定位。

三、對比內存快照找出泄漏位置

通過內存快照找到數量不斷增加的對象,找到增加對象是被誰給引用,找到問題代碼,改正之后就行,具體問題具體分析,這里通過我們在工作中遇到的情況來講解。

 

  1. const {EventEmitter} = require('events'); 
  2. const heapdump = require('heapdump'); 
  3.  
  4. global.test = new EventEmitter(); 
  5. heapdump.writeSnapshot('./' + Date.now() + '.heapsnapshot');  
  6. function run3() { 
  7.   const innerData = new Buffer(100); 
  8.   const outClosure3 = function () { 
  9.     void innerData; 
  10.   }; 
  11.   test.on('error', () => { 
  12.     console.log('error'); 
  13.   }); 
  14.   outClosure3(); 
  15.  
  16. for(let i = 0; i < 10; i++) { 
  17.   run3(); 
  18. gc();  
  19. heapdump.writeSnapshot('./' + Date.now() + '.heapsnapshot'); 

這里是對錯誤代碼的最小重現代碼。

首先使用 node –expose-gc index.js 運行代碼,將會得到兩個內存快照,之后打開 devtool,點擊 profile,載入內存快照。打開對比,Delta 會顯示對象的變化情況,如果對象 Delta 一直增長,就很有可能是內存泄漏了。

Node.js 中內存泄漏分析

可以看到有三處對象明顯增長的地方,閉包、上下文以及 Buffer 對象增長。點擊查看一下對象的引用情況:

Node.js 中內存泄漏分析

其實這三處對象增長都是一個問題導致的。test 對象中的 error 監聽事件中閉包引用了 innerData 對象,導致 buffer 沒有被清除,從而導致內存泄漏。

其實這里的 error 監聽事件中沒有引用 innerData 為什么會閉包引用了 innerData 對象,這個問題很是疑惑,后來弄清是 V8 的優化問題,在文末會額外講解一下。對于對比快照找到問題,得看你對代碼的熟悉程度,還有眼力了。

如何避免內存泄漏

文中的例子基本都可以很清楚的看出內存泄漏,但是在工作中,代碼混合上業務以后就不一定能很清楚的看出內存泄漏了,還是得依靠工具來定位內存泄漏。另外下面是一些避免內存泄漏的方法。

ESLint 檢測代碼檢查非期望的全局變量。

使用閉包的時候,得知道閉包了什么對象,還有引用閉包的對象何時清除閉包。***可以避免寫出復雜的閉包,因為復雜的閉包引起的內存泄漏,如果沒有打印內存快照的話,是很難看出來的。

綁定事件的時候,一定得在恰當的時候清除事件。在編寫一個類的時候,推薦使用 init 函數對類的事件監聽進行綁定和資源申請,然后 destroy 函數對事件和占用資源進行釋放。

額外說明

在做了很多測試以后得到下面關于閉包的總結。

 

  1. class Test{}; 
  2. global.test = new Test() 
  3. function run5(bigData) { 
  4.   const innerData = new Buffer(100);  
  5.   // 被閉包引用,創建一個 context: context1。 
  6.   // context1 引用 bigData,innerData。 
  7.   // closure 為 function run5() 
  8.   // run5函數沒有 context,所以 context1 沒有previous。 
  9.   // 在 run5中新建的函數將綁定上 context1。  
  10.   test.outClosure5 = function () {  
  11.     // 此函數閉包 context 指向 context1。  
  12.     void bigData; 
  13.     const closureData = new Buffer(100);  
  14.     // 被閉包使用,創建 context: context2。 
  15.     // outClosure5 函數有 context1,previous 指向 context1。 
  16.     // 在 outClosure5 中新建的函數將綁定上context2。  
  17.     test.innerClosure5 = function () {  
  18.       // 此函數閉包 context 指向 context2。  
  19.       void innerData;     } 
  20.     test.innerClosure5_1 = function () {  
  21.       // 此函數閉包 context 指向 context2。  
  22.       void closureData; 
  23.     } 
  24.   }; 
  25.   test.outClosure5_1 = function () {  
  26.   } 
  27.   test.outClosure5(); 
  28.  
  29. run5(new Buffer(1000)); 

V8 會生成一個 context 內部對象來實現閉包。下面是 V8 生成 context 的規則。

  • V8 會在被閉包引用變量聲明處創建一個 context2,如果被閉包的變量所在函數擁有 context1 ,則創建的 contex
  • t2 的 previous指向函數 context1。在被閉包引用變量的函數內新建的函數將會綁定上 context2。

由于這個和 V8版本相關,這里只測試了 v6.2.2 和 v6.10.1 還有 v7.7.1,都是相同的情況。如果想實踐測試可以在這個 repo 上了解更多。

責任編輯:未麗燕 來源: 碼農網
相關推薦

2017-03-20 13:43:51

Node.js內存泄漏

2020-01-03 16:04:10

Node.js內存泄漏

2015-03-10 10:59:18

Node.js開發指南基礎介紹

2013-11-01 09:34:56

Node.js技術

2025-01-08 08:47:44

Node.js內存泄露定時器

2023-06-30 23:25:46

HTTP模塊內存

2011-11-10 08:55:00

Node.js

2012-10-24 14:56:30

IBMdw

2011-09-08 13:46:14

node.js

2011-11-01 10:30:36

Node.js

2011-09-02 14:47:48

Node

2011-09-09 14:23:13

Node.js

2024-01-05 08:49:15

Node.js異步編程

2021-05-21 09:36:42

開發技能代碼

2016-08-11 14:02:02

NodeJS前端

2020-04-15 15:48:03

Node.jsstream前端

2021-10-23 06:42:46

Node.js 抓取堆快照.js

2021-12-25 22:29:57

Node.js 微任務處理事件循環

2020-07-31 13:35:34

Node.js應用分析前端

2021-12-01 00:05:03

Js應用Ebpf
點贊
收藏

51CTO技術棧公眾號

主站蜘蛛池模板: 欧美极品在线观看 | 欧美男人天堂 | 黄色亚洲 | 国产成人99久久亚洲综合精品 | 国产精品久久影院 | 日韩三区在线观看 | 免费观看国产视频在线 | 欧美性大战久久久久久久蜜臀 | 99热碰 | 日韩一级精品视频在线观看 | 九九亚洲| 免费在线观看成年人视频 | 成人国产精品免费观看视频 | 久久久久亚洲 | 一区二区三区网站 | 国产欧美精品一区二区色综合朱莉 | 亚洲精品乱码久久久久久黑人 | 国产成人精品午夜 | 成人免费在线视频 | 国产成人小视频 | 国产一区二区视频免费在线观看 | 国产精品福利在线观看 | 中文字幕亚洲欧美日韩在线不卡 | 欧美日韩国产综合在线 | 欧美黄色一级毛片 | 粉嫩国产精品一区二区在线观看 | 天天干夜夜操 | 亚洲欧美日韩在线不卡 | 天天躁日日躁性色aⅴ电影 免费在线观看成年人视频 国产欧美精品 | 毛片区| 自拍偷拍在线视频 | 久草网址 | 成人高清在线视频 | 国产午夜精品久久久 | 国产99免费视频 | 国产91亚洲精品 | 久久综合狠狠综合久久综合88 | 久久久久亚洲 | 拍真实国产伦偷精品 | 国产视频精品免费 | 北条麻妃av一区二区三区 |