Node.js 性能调优

服务性能测试

调试 Node 性能首先得找到性能瓶颈所在,包括两个方面:

  1. top, 测试 CPU 和内存
  2. iostat, io 设备的带宽(硬盘)

Node 性能分析工具

CPU 分析优化

工具

profile 探测器 + ab 压测

Node 自带的 profile

文档

  1. 启动 node 程序,运行 node --prof server.js 会生成 log 文件
  2. 压测 ab -c100 -t10 http://127.0.0.1:3000/dowload
  3. 执行 log 文件:node --prof-process xxx.log > profile.txt

--inspect-brk 参数

要想在应用代码的第一行断开,可以传入 --inspect-brk 标志

  1. 启动 node 程序 node --inspect-brk server.js
  2. 打开 Chrome 的 inspect 切换到 Profiler,启动 CPU 监控
  3. 压测
  4. 暂停、分析结果
Heavy 模式
image.png
Chart 模式
image.png

clinic 工具

npm install clinic -g

根据性能分析报告优化程序

Javascript 代码性能优化

计算性能优化的本质

  1. 减少不必要的计算
  2. 空间换取时间

HTTP 服务性能优化准则

  1. 提前计算(计算是否可以提前到服务启动阶段


    image.png

内存分析优化

GC
新生代,容量小,垃圾回收快
老生代,容量大,垃圾回收慢
减少内存使用,提高服务性能

不要出现内存泄露。

分析内存使用情况

--inspect-brk 调试

  1. node --inspect-brk-server.js
  2. 打开 chrome 控制面板,切到 Memory
  3. 压测
  4. 压测过程中抓取快照

为了便于直观的观察内存的占用,在请求中创建数组 生成 长度为 100w 的数组

压测:

ab -c100 -t10 http://127.0.0.1:3000/api/1000000

压测(请求)过程中抓取的快照 内存占用(318M)


image.png

压测(请求)结束后抓取的快照 内存占用(7.7M)


image.png

比较两次快照


image.png

制造内存泄漏的场景

创建不被释放的数组,每次请求往数组中添加元素

压测前后的内存使用情况


image.png

都是没有释放的数组,还指出了变量名,执行栈(函数)


image.png

优化内存

  1. Buffer 分配内存

  2. 自己编写 c++插件

  3. 子进程与线程

    • 进程
    • 操作系统挂载运行程序的单元
    • 拥有独立的资源,比如内存
    • 线程
    • 进行运算调度的单元
    • 进程内的线程共享进程内的资源
  4. Node 子进程和线程

    • 主线程运行 V8 和 js
    • 多个子线程通过事件循环被调度
    • 使用子进程或线程利用更多的 CPU 资源
  5. 集群模式

    • 集群模式可以监听相同的端口
    • lib > net.js > listenInCluster 方法

child_process

// worker.js
const http = require('http')
const port = Math.round((Math.random() + 1) * 1000)

http
  .createServer((req, res) => {
    res.end(port + '')
  })
  .listen(port, () => {
    console.log('runing: ', port)
  })

process.on('message', data => {
  console.log('child', port, data)
  process.send('from child --- ' + port)
})
// master.js
const os = require('os')
const { fork } = require('child_process')
const cpus = os.cpus().length

const createWorker = () => {
  const child_process = fork(__dirname + '/worker.js') // ChildProcess 的实例,其实还是发布订阅模式 基于 Event 事件实现的

  // 向子进程发送消息
  child_process.send('from master!')

  // 监听子进程消息
  child_process.on('message', data => {
    console.log('from child, port is --- ', data)
  })

  // 子进程退出时重启
  child_process.on('exit', () => {
    console.log('child_process is died --- ' + child_process.pid)
    createWorker()
  })

  // 子进程无法被复制创建、杀死、发送消息时触发
  child_process.on('error', () => {
    console.log('')
  })
}

for (let i = 0; i < cpus; i++) {
  createWorker()
}

// 创建子进程后主进程没有退出,如果和子进程没有事件回调交互的话需要手动退出主进程。所以这就是为什么一般根据cpu核数创建子进程,因为子进程开启后主进程退出了。
// setTimeout(() => {
//   process.exit(1)
// }, 2000)

cluster

// app.js
const http = require('http')

http
  .createServer((req, res) => {
    res.writeHead(200)
    res.end('hello world')
  })
  .listen(8000)

process.on('message', msg => {
  if (msg === 'ping') {
    process.send('pang')
  }
})

// 处理没有捕获到的错误
process.on('uncaughtException', err => {
  console.error(err)
  process.exit(1)
})

// 监听内存泄漏
setInterval(() => {
  if (process.memoryUsage.memoryUsage().rss > 700 * 1024 * 1024) {
    console.log('memory leak')
    process.exit(1)
  }
}, 5000)
// index.js
const cluster = require('cluster')
const process = require('process')
const cpus = require('os').cpus().length

const createWorker = () => {
  let count = 0
  const worker = cluster.fork()

  // 监听子进程是否还在工作
  setInterval(() => {
    worker.send('ping')
    count++

    if (count > 3) {
      worker.exit(1)
    }
  }, 3000)

  worker.on('message', msg => {
    if (msg === 'pang') {
      count--
    }
  })
}

if (cluster.isPrimary) {
  console.log(`Primary ${process.pid} is running`)

  // Fork workers
  for (let i = 0; i < cpus / 2; i++) {
    createWorker()
  }

  // 监听子进程状态
  cluster.on('exit', (worker, code, signal) => {
    console.log(`worker ${worker.process.pid} died`)

    setTimeout(() => {
      createWorker()
    }, 5000)
  })
} else {
  require('./app')
}

架构优化

动静分离

静态内容

Q:基本不会变动,也不会因为请求参数的不同而变化的
A: 使用 CDN 分发,HTTP 缓存

动态内容

Q:各种因为请求参数不同而变动,且变动的数量几乎不可枚举
A:用大量的源站机器承载,结合反响代理进行负载均衡

反向代理和缓存服务

Nginx 反向代理
redis 缓存

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 211,194评论 6 490
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,058评论 2 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 156,780评论 0 346
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,388评论 1 283
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,430评论 5 384
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,764评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,907评论 3 406
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,679评论 0 266
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,122评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,459评论 2 325
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,605评论 1 340
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,270评论 4 329
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,867评论 3 312
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,734评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,961评论 1 265
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,297评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,472评论 2 348

推荐阅读更多精彩内容