位置: 编程技术 - 正文

浅析Node.js中的内存泄漏问题(node.js详解)

编辑:rootadmin

推荐整理分享浅析Node.js中的内存泄漏问题(node.js详解),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:node.js的理解,node.js详解,node .js,nodejs总结,node.js deno,node.js有什么作用,node.js的理解,node.js有什么作用,内容如对您有帮助,希望把文章链接给更多的朋友!

这篇文章是由Mozilla的Identity团队带来的 A Node.JS Holiday Season系列文章的首篇,该团队上个月发布了 Persona的第一个测试版本。在开发Persona时我们构建了一系列的工具,包括了从调试,到本地化,到依赖管理以及更多的方面。在这一系列的文章中我们将与社区分享我们的经验和这些工具,这对任何想用node.js建立一个高可用性服务的人都很有用。我们希望您能喜欢这些文章,并期待看到您的想法和贡献。

我们将从一篇关于Node.js的实质性问题:内存泄漏的主题文章开始。我们会介绍 node-memwatch — 一个帮助发现并隔离Node中的内存泄漏问题的函数库。

为什么自寻烦恼?

关于追踪内存泄漏问得最多的问题就是,“为什么要自寻烦恼?”。难道没有更紧迫的问题需要先解决吗?为什么不选择不时地重启服务,或为之分配更多的RAM?为了回答这些问题,我们提出了以下三点建议:

1.也许你不在乎不断增长的内存占用,但V8在乎(V8是Node运行时的引擎)。随着内存泄漏的增长,V8对垃圾收集器越来越具有攻击性,这会使你的应用运行速度变慢。所以,在Node上,内存泄漏会损害程序性能。

2.内存泄漏可能触发其他类型的失败。内存泄漏的代码可能会持续的引用有限的资源。你可能会耗尽文件描述符;你还可能会突然不能建立新的数据库连接。这类问题可能在你的应用耗尽内存前很早就会暴露出来,但它仍然会是你陷入困境。

3.最后,你的应用迟早会崩溃,并且在你的应用受到欢迎时肯定会发生。所有人都会在Hacker News上嘲笑你,讽刺你,这样你就悲剧了。

溃千里之堤的蚁穴在哪里?

在构建复杂应用的时候,很多地方都可能发生内存泄露。 闭包可能是最广为人知也是最声名狼藉的。因为闭包保留了对其作用域内的东西的引用,而这正是通常的内存泄露之源。

闭包泄露往往只有在有人去寻找它们的时候才能发现。但是在Node的异步世界里,我们随时随地的通过回调函数不停的生成闭包。如果这些回调函数没有在创建后立刻使用,分配的内存就会持续增长,那些看起来没有内存泄露问题的代码也会产生泄露。而这种问题更难发现。

你的应用也可能由于上游代码的问题导致内存泄露。也许你能定位到出现内存泄露的代码,但是你可能只能眼巴巴地盯着你那完美无缺的代码然后困惑于这到底是怎么泄露的!

正是这些难以定位的内存泄露促使我们想要一个node-memwatch这样的工具。传说几个月以前,我们的Lloyd Hilaiel把他自己锁在一个小房间里两天,试着追踪一个在压力测试下变得非常明显的内存泄露问题。(顺便说下,尽请期待Lloyd即将到来的关于负荷测试的文章)

经过两天的努力,他终于发现了Node内核中的元凶:http.ClientRequest中的事件监听器没有被释放。(最终修复这个问题的补丁只有两个但却至关重要的字母)。正是这次痛苦的经历促使Lloyd想要写一个能够帮助查找内存泄露的工具。

内存泄露定位工具

现在已经有许多好用且不断增强的工具用于定位Node.js应用的内存泄露。下面是其中的一些:

Jimb Esser的node-mtrace,它使用了GCC的mtrace工具来分析堆的使用。 Dave Pacheco的node-heap-dump对V8的堆抓取了一张快照并把所有的东西序列化进一个巨大的JSON文件。它还包含了一些分析研究快照结果的JavaScript工具。 Danny Coates的v8-profiler和node-inspector提供了绑定在Node中的V8分析器和一个基于WebKit Web Inspector的debug界面。 Felix Gnass的未禁用保持器图表分支。 Felix Geisendorfer的Node内存泄露指导(Node Memory Leak Tutorial)是一个又短又酷的v8-profiler和node-debugger使用教程。同时也是目前最先进的Node.js内存泄露调试技术指南。 Joyent的SmartOS平台,它提供了大量用于调试Node.js内存泄露的工具。

上面的这些工具我们都很喜欢,但是没有一个适用于我们的场景。Web Inspector对于开发中的应用非常棒,但是很难用于热部署的场景,尤其是在多服务器和涉及子进程的时候。同样的,在长时间高负载运行中出现的内存泄露也很难复现。像dtrace和libumem这样的工具虽然让人印象深刻,但是不是所有的操作系统都能用。

Enternode-memwatch

浅析Node.js中的内存泄漏问题(node.js详解)

我们需要一个跨平台的调试库,当我们的程序可能存在内存泄漏时,它不需要设备告诉我们,并且会帮我们找到哪里存在泄漏。所以我们实现了node-memwatch。

它给我们提供三件东西:

一个‘泄漏'事件发射器

一个‘状态事件发射器

一个堆内存区分类

并且还有一个在测试时很有用处的,可以触发垃圾收集器的功能。好吧,一共四点。

memwatch.on('stats', ...): Post-GC堆统计

node-memwatch能够在任何一个JS对象分配之前,紧随着一次完整的垃圾回收和内存压缩发出一个内存使用样本。(它使用了V8的post-gc钩子,V8::AddGCEpilogueCallback,来在每次垃圾回收触发时收集堆使用信息)

统计数据包括:

usage_trend(使用趋势) current_base(当前基数) estimated_base(预期基数) num_full_gc (完整的垃圾回收次数) num_inc_gc (增长的垃圾回收次数) heap_compactions (内存压缩次数) min (最小) max (最大)

这里有一个展示存在内存泄露的应用的数据看起来是什么样的例子。下面的图表随着时间追踪内存的使用。疯狂的绿线展示了process.memoryUsage()报告的内容。红线展示了node_memwatch报告的current_base。左下侧的盒子展示了附加信息。

注意Incr GCs非常高。那说明V8在拼命的尝试清理内存。

memwatch.on('leak', ...): 堆分配趋势

我们定义了一个简单的侦测算法来提醒你应用程序可能存在内存泄漏。即如果经过连续五次GC,内存仍被持续分配而没有得到释放,node-memwatch就会发出一个leak事件。事件的具体信息格式是明了易读的,就像这样:

memwatch.HeapDiff(): 查找泄漏元凶

最后,node-memwatch能比较堆上对象的名称和分配数量的快照,其对比前后的差异可以帮助找出导致内存泄漏的元凶。

对比产生的内容就像这样:

HeapDiff方法在进行数据采样前会先进行一次完整的垃圾回收,以使得到的数据不会充满太多无用的信息。memwatch的事件处理会忽略掉由HeapDiff触发的垃圾回收事件,所以在stats事件的监听回调函数中你可以安全地调用HeapDiff方法。

浅析Node.js中使用依赖注入的相关问题及解决方法 最近,我转向使用依赖注入来帮助理解分离代码的简单途径,并有助测试。然而,Node.js中的模块依赖Node提供的系统API,这很难判断私有依赖被恰当的使

在Mac OS下使用Node.js的简单教程 这里有一篇很好的Node.js介绍文章greatnodejsintro,它将给你一个非常方便的介绍Node.js和CouchDB,并给出一个实例实现REST的服务用于执行书签的CRUD操作,使

在Node.js应用中使用Redis的方法简介 在开始本文之前请确保安装好Redis和Node.js以及Node.js的Redis扩展——node_redis首先创建一个新文件夹并新建文本文件app.js文件内容如下:varredis=require("redis")

标签: node.js详解

本文链接地址:https://www.jiuchutong.com/biancheng/377988.html 转载请保留说明!

上一篇:Node.js编程中客户端Session的使用详解(node.js详解)

下一篇:浅析Node.js中使用依赖注入的相关问题及解决方法(node.js使用教程)

  • 3901100090的暂定税率
  • 捐赠支出增值税
  • 多发了工资怎么处理
  • 个人独资企业可以投资有限公司吗
  • 商家发票可以随便开金额吗
  • 会计利润包不包括营业外支出
  • 拍卖书画收入如何交税
  • 电子凭证是否具有法律效力
  • 小微企业营业外收入税率是多少
  • 利息收入汇算清缴
  • 兼职劳务费如何入账
  • 香港公司在大陆设立子公司
  • 买酒专票怎么可以抵税
  • 个人给单位干的小工程需代扣个税吗?
  • 0税率发票纳税申报如何填报
  • 纳税人提供植物养护服务按照什么服务缴纳增值税
  • 固定资产一次性折旧政策2023
  • 出纳汇错款会计怎么做账
  • 投资性房地产属于流动资产吗
  • Proxy error: Could not proxy request 解决方法
  • macbook上安装windows10
  • 五险二金的二金有什么好处
  • ihs.exe是什么
  • 在途物资什么类科目
  • php封包
  • php消息实时推送完整示例
  • 热带雨林瀑布群雪野
  • 乐观锁用法
  • 协会收到的政府奖励会计处理
  • 工程项目成本核算的依据主要有
  • Midjourney之外21款免费的AI Image画图网站集合
  • 语义特征的语法学概念
  • 若依框架用到的技术
  • 命令行查看硬件信息
  • python数学建模资料
  • 利润表本年累计数公式
  • 厂房和设备折旧年限
  • 将外购商品用于个人消费
  • 坏账准备的会计分录怎么写
  • 研发支出的主要内容
  • 城建税退回怎么做分录
  • mongodb安装使用
  • 待报解预算收入是什么意思,扣了钱
  • 如何设置长期有效的二维码
  • 一般纳税人应交增值税
  • 增值税的预缴税怎么算
  • 房产税的政策依据
  • 固定资产如何计提折旧
  • 库存商品调价会计分录
  • 公司怎么建
  • mysql 隐式游标
  • mac怎么录制
  • centos control-d
  • explorer.exe是什么指令
  • macos创建文件夹
  • 华硕安装win7系统
  • win7系统自带游戏在哪
  • nalntsrv.exe - nalntsrv是什么进程 有什么用
  • win7共享文件夹关闭密码保护
  • win7 32位无线网卡驱动
  • win7系统修改mac地址
  • windows8装windows10,文件会丢失吗
  • mac2019强制关机
  • linux安装glibc.i686
  • 深入剖析kubernetes pdf
  • 学习软件
  • JQuery 又谈ajax局部刷新
  • 谈一谈你对人与自然关系的认识
  • shell脚本视频教程
  • js插件推荐
  • 安卓手机照片压缩
  • jquery easyui有哪些特点
  • 置顶是怎么弄的
  • js中.html
  • android底部弹出页面
  • jquery-validate
  • 咨询服务合同属于购销合同吗
  • 安徽省渔业管理办法第十条规定
  • 江苏国税局官网登录
  • 江苏徐州买房
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设