成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

你不知道的Node.js性能優化,讀了之后水平直線上升!

開發 前端
本文作者總結了Node.js性能優化方法,其中包括使用最新版本、使用 fast-json-stringify 加速 JSON 序列化、提升 Promise 的性能等等。

1、使用最新版本的 Node.js

僅僅是簡單的升級 Node.js 版本就可以輕松地獲得性能提升,因為幾乎任何新版本的 Node.js 都會比老版本性能更好,為什么?

Node.js 每個版本的性能提升主要來自于兩個方面:

  • V8 的版本更新;
  • Node.js 內部代碼的更新優化。

例如最新的 V8 7.1 中,就優化了某些情形下閉包的逃逸分析,讓 Array 的一些方法得到了性能提升:

 

 

 

你不知道的Node.js性能優化,讀了之后水平直線上升

 

Node.js 的內部代碼,隨著版本的升級,也會有明顯的優化,比如下面這個圖就是 require 的性能隨著 Node.js 版本升級的變化:

 

 

 

你不知道的Node.js性能優化,讀了之后水平直線上升

 

每個提交到 Node.js 的 PR 都會在 review 的時候考慮會不會對當前性能造成衰退。同時也有專門的 benchmarking 團隊來監控性能變化,你可以在這里看到 Node.js 的每個版本的性能變化:

https://benchmarking.nodejs.org/

所以,你可以完全對新版本 Node.js 的性能放心,如果發現了任何在新版本下的性能衰退,歡迎提交一個 issue。

如何選擇 Node.js 的版本?

這里就要科普一下 Node.js 的版本策略:

  • Node.js 的版本主要分為 Current 和 LTS;
  • Current 就是當前最新的、依然處于開發中的 Node.js 版本;
  • LTS 就是穩定的、會長期維護的版本;
  • Node.js 每六個月(每年的四月和十月)會發布一次大版本升級,大版本會帶來一些不兼容的升級;
  • 每年四月發布的版本(版本號為偶數,如 v10)是 LTS 版本,即長期支持的版本,社區會從發布當年的十月開始,繼續維護 18 + 12 個月(Active LTS + Maintaince LTS);
  • 每年十月發布的版本(版本號為奇數,例如現在的 v11)只有 8 個月的維護期。

舉個例子,現在(2018年11月),Node.js Current 的版本是 v11,LTS 版本是 v10 和 v8。更老的 v6 處于 Maintenace LTS,從明年四月起就不再維護了。去年十月發布的 v9 版本在今年六月結束了維護。

 

 

 

 

對于生產環境而言,Node.js 官方推薦使用最新的 LTS 版本,現在是 v10.13.0。

2、使用 fast-json-stringify 加速 JSON 序列化

在 JavaScript 中,生成 JSON 字符串是非常方便的: 

  1. const json = JSON.stringify(obj) 

但很少人會想到這里竟然也存在性能優化的空間,那就是使用 JSON Schema 來加速序列化。

在 JSON 序列化時,我們需要識別大量的字段類型,比如對于 string 類型,我們就需要在兩邊加上 ",對于數組類型,我們需要遍歷數組,把每個對象序列化后,用 , 隔開,然后在兩邊加上 [ 和 ],諸如此類等等。

但如果已經提前通過 Schema 知道每個字段的類型,那么就不需要遍歷、識別字段類型,而可以直接用序列化對應的字段,這就大大減少了計算開銷,這就是 fast-json-stringfy 的原理。

根據項目中的跑分,在某些情況下甚至可以比 JSON.stringify 快接近 10 倍!

 

 

 

 

一個簡單的示例: 

  1. const fastJson = require('fast-json-stringify'
  2. const stringify = fastJson({ 
  3.     title: 'Example Schema'
  4.     type: 'object'
  5.     properties: { 
  6.         name: { type: 'string' }, 
  7.         age: { type: 'integer' }, 
  8.         books: { 
  9.             type: 'array'
  10.             items: { 
  11.                 type: 'string'
  12.                 uniqueItems: true 
  13.             } 
  14.         } 
  15.     } 
  16. }) 
  17.  
  18. console.log(stringify({ 
  19.     name'Starkwang'
  20.     age: 23, 
  21.     books: ['C++ Primier''響け!ユーフォニアム~'
  22. })) 
  23. //=> {"name":"Starkwang","age":23,"books":["C++ Primier","響け!ユーフォニアム~"]}  

在 Node.js 的中間件業務中,通常會有很多數據使用 JSON 進行,并且這些 JSON 的結構是非常相似的(如果你使用了 TypeScript,更是這樣),這種場景就非常適合使用 JSON Schema 來優化。

3、提升 Promise 的性能

Promise 是解決回調嵌套地獄的靈丹妙藥,特別是當自從 async/await 全面普及之后,它們的組合無疑成為了 JavaScript 異步編程的終極解決方案,現在大量的項目都已經開始使用這種模式。

但是優雅的語法后面也隱藏著性能損耗,我們可以使用 github 上一個已有的跑分項目進行測試,以下是測試結果: 

  1. file                               time(ms)  memory(MB) 
  2. callbacks-baseline.js                   380       70.83 
  3. promises-bluebird.js                    554       97.23 
  4. promises-bluebird-generator.js          585       97.05 
  5. async-bluebird.js                       593      105.43 
  6. promises-es2015-util.promisify.js      1203      219.04 
  7. promises-es2015-native.js              1257      227.03 
  8. async-es2017-native.js                 1312      231.08 
  9. async-es2017-util.promisify.js         1550      228.74 
  10.  
  11. Platform info: 
  12. Darwin 18.0.0 x64 
  13. Node.JS 11.1.0 
  14. V8 7.0.276.32-node.7 
  15. Intel(R) Core(TM) i5-5257U CPU @ 2.70GHz × 4  

我們可以從結果中看到,原生 async/await + Promise 的性能比 callback 要差很多,并且內存占用也高得多。對于大量異步邏輯的中間件項目而言,這里的性能開銷還是不能忽視的。

通過對比可以發現,性能損耗主要來自于 Promise 對象自身的實現,V8 原生實現的 Promise 比 bluebird 這樣第三方實現的 Promise 庫要慢很多。而 async/await 語法并不會帶來太多的性能損失。

所以對于大量異步邏輯、輕量計算的中間件項目而言,可以在代碼中把全局的 Promise 換為 bluebird 的實現: 

  1. global.Promise = require('bluebird'); 

4、正確地編寫異步代碼

使用 async/await 之后,項目的異步代碼會非常好看: 

  1. const foo = await doSomethingAsync(); 
  2. const bar = await doSomethingElseAsync();  

但因此,有時我們也會忘記使用 Promise 給我們帶來的其它能力,比如 Promise.all() 的并行能力: 

  1. // bad 
  2. async function getUserInfo(id) { 
  3.     const profile = await getUserProfile(id); 
  4.     const repo = await getUserRepo(id) 
  5.     return { profile, repo } 
  6.  
  7. // good 
  8. async function getUserInfo(id) { 
  9.     const [profile, repo] = await Promise.all([ 
  10.         getUserProfile(id), 
  11.         getUserRepo(id) 
  12.     ]) 
  13.     return { profile, repo } 
  14.  

還有比如 Promise.any()(此方法不在ES6 Promise標準中,也可以使用標準的 Promise.race() 代替),我們可以用它輕松實現更加可靠快速的調用: 

  1. async function getServiceIP(name) { 
  2.     // 從 DNS 和 ZooKeeper 獲取服務 IP,哪個先成功返回用哪個 
  3.     // 與 Promise.race 不同的是,這里只有當兩個調用都 reject 時,才會拋出錯誤 
  4.     return await Promise.any([ 
  5.         getIPFromDNS(name), 
  6.         getIPFromZooKeeper(name
  7.     ]) 
  8. }   

5、優化 V8 GC

關于 V8 的垃圾回收機制,已經有很多類似的文章了,這里就不再重復介紹。推薦兩篇文章:

  • 解讀 V8 GC Log(一): Node.js 應用背景與 GC 基礎知識
  • 解讀 V8 GC Log(二): 堆內外內存的劃分與 GC 算法

我們在日常開發代碼的時候,比較容易踩到下面幾個坑:

坑一:使用大對象作為緩存,導致老生代(Old Space)的垃圾回收變慢

示例: 

  1. const cache = {} 
  2. async function getUserInfo(id) { 
  3.     if (!cache[id]) { 
  4.         cache[id] = await getUserInfoFromDatabase(id) 
  5.     } 
  6.     return cache[id] 
  7.  

這里我們使用了一個變量 cache 作為緩存,加速用戶信息的查詢,進行了很多次查詢后,cache 對象會進入老生代,并且會變得無比龐大,而老生代是使用三色標記 + DFS 的方式進行 GC 的,一個大對象會直接導致 GC 花費的時間增長(而且也有內存泄漏的風險)。

解決方法就是:

  • 使用 Redis 這樣的外部緩存,實際上像 Redis 這樣的內存型數據庫非常適合這種場景;
  • 限制本地緩存對象的大小,比如使用 FIFO、TTL 之類的機制來清理對象中的緩存。

坑二:新生代空間不足,導致頻繁 GC

這個坑會比較隱蔽。

Node.js 默認給新生代分配的內存是 64MB(64位的機器,后同),但因為新生代 GC 使用的是 Scavenge 算法,所以實際能使用的內存只有一半,即 32MB。

當業務代碼頻繁地產生大量的小對象時,這個空間很容易就會被占滿,從而觸發 GC。雖然新生代的 GC 比老生代要快得多,但頻繁的 GC 依然會很大地影響性能。極端的情況下,GC 甚至可以占用全部計算時間的 30% 左右。

解決方法就是,在啟動 Node.js 時,修改新生代的內存上限,減少 GC 的次數: 

  1. node --max-semi-space-size=128 app.js 

當然有人肯定會問,新生代的內存是不是越大越好呢?

隨著內存的增大,GC 的次數減少,但每次 GC 所需要的時間也會增加,所以并不是越大越好,具體數值需要對業務進行壓測 profile 才能確定分配多少新生代內存最好。

但一般根據經驗而言,分配 64MB 或者 128MB 是比較合理的。

6、正確地使用 Stream

Stream 是 Node.js 最基本的概念之一,Node.js 內部的大部分與 IO 相關的模塊,比如 http、net、fs、repl,都是建立在各種 Stream 之上的。

下面這個經典的例子應該大部分人都知道,對于大文件,我們不需要把它完全讀入內存,而是使用 Stream 流式地把它發送出去: 

  1. const http = require('http'); 
  2. const fs = require('fs'); 
  3.  
  4. // bad 
  5. http.createServer(function (req, res) { 
  6.     fs.readFile(__dirname + '/data.txt'function (err, data) { 
  7.         res.end(data); 
  8.     }); 
  9. }); 
  10.  
  11. // good 
  12. http.createServer(function (req, res) { 
  13.     const stream = fs.createReadStream(__dirname + '/data.txt'); 
  14.     stream.pipe(res); 
  15. });  

在業務代碼中合理地使用 Stream 能很大程度地提升性能,當然是但實際的業務中我們很可能會忽略這一點,比如采用 React 服務器端渲染的項目,我們就可以用 renderToNodeStream: 

  1. const ReactDOMServer require('react-dom/server'
  2. const http = require('http'
  3. const fs = require('fs'
  4. const app = require('./app'
  5.  
  6. // bad 
  7. const server = http.createServer((req, res) => { 
  8.     const body = ReactDOMServer.renderToString(app) 
  9.     res.end(body) 
  10. }); 
  11.  
  12. // good 
  13. const server = http.createServer(function (req, res) { 
  14.     const stream = ReactDOMServer.renderToNodeStream(app) 
  15.     stream.pipe(res) 
  16. }) 
  17.  
  18. server.listen(8000)  

使用 pipeline 管理 stream

在過去的 Node.js 中,處理 stream 是非常麻煩的,舉個例子: 

  1. source.pipe(a).pipe(b).pipe(c).pipe(dest) 

一旦其中 source、a、b、c、dest 中,有任何一個 stream 出錯或者關閉,會導致整個管道停止,此時我們需要手工銷毀所有的 stream,在代碼層面這是非常麻煩的。

所以社區出現了 pump 這樣的庫來自動控制 stream 的銷毀。而 Node.js v10.0 加入了一個新的特性:stream.pipeline,可以替代 pump 幫助我們更好的管理 stream。

一個官方的例子: 

  1. const { pipeline } = require('stream'); 
  2. const fs = require('fs'); 
  3. const zlib = require('zlib'); 
  4.  
  5. pipeline( 
  6.     fs.createReadStream('archive.tar'), 
  7.     zlib.createGzip(), 
  8.     fs.createWriteStream('archive.tar.gz'), 
  9.     (err) => { 
  10.         if (err) { 
  11.             console.error('Pipeline failed', err); 
  12.         } else { 
  13.             console.log('Pipeline succeeded'); 
  14.         } 
  15.     } 
  16. );  

實現自己的高性能 Stream

在業務中你可能也會自己實現一個 Stream,可讀、可寫、或者雙向流,可以參考文檔:

  • implementing Readable streams
  • implementing Writable streams

Stream 雖然很神奇,但自己實現 Stream 也可能會存在隱藏的性能問題,比如: 

  1. class MyReadable extends Readable { 
  2.     _read(size) { 
  3.         while (null !== (chunk = getNextChunk())) { 
  4.             this.push(chunk); 
  5.         } 
  6.     } 
  7.  

當我們調用 new MyReadable().pipe(xxx) 時,會把 getNextChunk() 所得到的 chunk 都 push 出去,直到讀取結束。但如果此時管道的下一步處理速度較慢,就會導致數據堆積在內存中,導致內存占用變大,GC 速度降低。

而正確的做法應該是,根據 this.push() 返回值選擇正確的行為,當返回值為 false 時,說明此時堆積的 chunk 已經滿了,應該停止讀入。 

  1. class MyReadable extends Readable { 
  2.     _read(size) { 
  3.         while (null !== (chunk = getNextChunk())) { 
  4.             if (!this.push(chunk)) { 
  5.                 return false   
  6.             } 
  7.         } 
  8.     } 
  9.  

這個問題在 Node.js 官方的一篇文章中有詳細的介紹:Backpressuring in Streams

7、C++ 擴展一定比 JavaScript 快嗎?

Node.js 非常適合 IO 密集型的應用,而對于計算密集的業務,很多人都會想到用編寫 C++ Addon 的方式來優化性能。但實際上 C++ 擴展并不是靈丹妙藥,V8 的性能也沒有想象的那么差。

比如,我在今年九月份的時候把 Node.js 的 net.isIPv6() 從 C++ 遷移到了 JS 的實現,讓大多數的測試用例都獲得了 10%- 250% 不等的性能提升(具體PR可以看這里)。

JavaScript 在 V8 上跑得比 C++ 擴展還快,這種情況多半發生在與字符串、正則表達式相關的場景,因為 V8 內部使用的正則表達式引擎是 irregexp,這個正則表達式引擎比 boost 中自帶的引擎(boost::regex)要快得多。

還有一處值得注意的就是,Node.js 的 C++ 擴展在進行類型轉換的時候,可能會消耗非常多的性能,如果不注意 C++ 代碼的細節,性能會很大地下降。

這里有一篇文章對比了相同算法下 C++ 和 JS 的性能(需翻墻):How to get a performance boost using Node.js native addons。其中值得注意的結論就是,C++ 代碼在對參數中的字符串進行轉換后(String::Utf8Value轉為std::string),性能甚至不如 JS 實現的一半。只有在使用 NAN 提供的類型封裝后,才獲得了比 JS 更高的性能。 

 

 

 

換句話說,C++ 是否比 JavaScript 更加高效需要具體問題具體分析,某些情況下,C++ 擴展不一定就會比原生 JavaScript 更高效。如果你對自己的 C++ 水平不是那么有信心,其實還是建議用 JavaScript 來實現,因為 V8 的性能比你想象的要好得多。

8、使用 node-clinic 快速定位性能問題

說了這么多,有沒有什么可以開箱即用,五分鐘見效的呢?當然有。

node-clinic 是 NearForm 開源的一款 Node.js 性能診斷工具,可以非常快速地定位性能問題。 

  1. npm i -g clinic  
  2. npm i -g autocannon  

使用的時候,先開啟服務進程: 

  1. clinic doctor -- node server.js 

然后我們可以用任何壓測工具跑一次壓測,比如使用同一個作者的 autocannon(當然你也可以使用 ab、curl 這樣的工具來進行壓測。): 

  1. autocannon http://localhost:3000 

壓測完畢后,我們 ctrl + c 關閉 clinic 開啟的進程,就會自動生成報告。比如下面就是我們一個中間件服務的性能報告: 

 

 

 

我們可以從 CPU 的使用曲線看出,這個中間件服務的性能瓶頸不在自身內部的計算,而在于 I/O 速度太慢。clinic 也在上面告訴我們檢測到了潛在的 I/O 問題。

下面我們使用 clinic bubbleprof 來檢測 I/O 問題: 

  1. clinic bubbleprof -- node server.js 

再次進行壓測后,我們得到了新的報告: 

 

 

 

這個報告中,我們可以看到,http.Server 在整個程序運行期間,96% 的時間都處于 pending 狀態,點開后,我們會發現調用棧中存在大量的 empty frame,也就是說,由于網絡 I/O 的限制,CPU 存在大量的空轉,這在中間件業務中非常常見,也為我們指明了優化方向不在服務內部,而在服務器的網關和依賴的服務相應速度上。

想知道如何讀懂 clinic bubbleprof 生成的報告,可以看這里:https://clinicjs.org/bubblepr...

同樣,clinic 也可以檢測到服務內部的計算性能問題,下面我們做一些“破壞”,讓這個服務的性能瓶頸出現在 CPU 計算上。

我們在某個中間件中加入了空轉一億次這樣非常消耗 CPU 的“破壞性”代碼: 

  1. function sleep() { 
  2.     let n = 0 
  3.     while (n++ < 10e7) { 
  4.         empty() 
  5.     } 
  6. function empty() { } 
  7.  
  8. module.exports = (ctx, next) => { 
  9.     sleep() 
  10.     // ...... 
  11.     return next() 
  12.  

然后使用 clinic doctor,重復上面的步驟,生成性能報告: 

 

 

 

這就是一個非常典型的同步計算阻塞了異步隊列的“病例”,即主線程上進行了大量的計算,導致 JavaScript 的異步回調沒法及時觸發,Event Loop 的延遲極高。

對于這樣的應用,我們可以繼續使用 clinic flame 來確定到底是哪里出現了密集計算: 

  1. clinic flame -- node app.js 

壓測后,我們得到了火焰圖(這里把空轉次數減少到了100萬次,讓火焰圖看起來不至于那么極端): 

 

 

 

從這張圖里,我們可以明顯看到頂部的那個大白條,它代表了 sleep 函數空轉所消耗的 CPU 時間。根據這樣的火焰圖,我們可以非常輕松地看出 CPU 資源的消耗情況,從而定位代碼中哪里有密集的計算,找到性能瓶頸。 

責任編輯:龐桂玉 來源: segmentfault
相關推薦

2021-11-16 08:51:29

Node JavaScript變量類型

2021-12-29 11:38:59

JS前端沙箱

2022-09-15 08:33:11

ChaosBladeJava場景

2022-09-04 15:54:10

Node.jsAPI技巧

2020-06-12 09:20:33

前端Blob字符串

2020-07-28 08:26:34

WebSocket瀏覽器

2020-07-03 14:30:34

Node內存前端

2024-02-05 11:55:41

Next.js開發URL

2010-08-23 09:56:09

Java性能監控

2011-12-09 11:16:48

Node.js

2011-09-15 17:10:41

2021-02-01 23:23:39

FiddlerCharlesWeb

2022-10-13 11:48:37

Web共享機制操作系統

2009-12-10 09:37:43

2020-12-14 07:51:16

JS 技巧虛值

2021-10-17 13:10:56

函數TypeScript泛型

2020-08-11 11:20:49

Linux命令使用技巧

2012-11-23 10:57:44

Shell

2021-12-22 09:08:39

JSON.stringJavaScript字符串

2015-06-19 13:54:49

點贊
收藏

51CTO技術棧公眾號

主站蜘蛛池模板: 国产精品美女久久久久久久久久久 | 午夜欧美 | 天堂一区二区三区 | 亚洲国产高清在线 | 在线观看中文字幕av | 奇米影视77 | 久久99精品视频 | 午夜影院免费体验区 | 午夜精品一区二区三区在线视 | 久久宗合色 | 国产精品99一区二区 | 精品国产视频 | 欧美黄视频 | 久久99这里只有精品 | 日本在线播放一区二区 | 国产精品一区在线播放 | 久久精品免费观看 | 九九国产| 亚洲一区二区三区久久久 | 日本黄色片免费在线观看 | 中文字幕在线一区二区三区 | 国产精品日韩欧美一区二区三区 | 不卡一二区 | 一本一道久久a久久精品综合蜜臀 | 国产精品成人久久久久 | 国产精品黄色 | 中文字幕高清视频 | 欧美成人精品激情在线观看 | 91国产精品| 91精品国产综合久久婷婷香蕉 | 欧美偷偷 | 国产a视频 | 狠狠操狠狠操 | 一级无毛片 | 免费三级网| 综合色播 | 欧美日韩久久久 | av黄色在线 | 久久久久久久香蕉 | 男人天堂网址 | 久久久久国产一区二区三区 |