用户1839651
Node.js 中 fs.readFile 读取大文件导致内存飙升,问题出在缓冲区分配策略
原创
关注作者
腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
用户1839651
社区首页
>
专栏
>
Node.js 中 fs.readFile 读取大文件导致内存飙升,问题出在缓冲区分配策略
Node.js 中 fs.readFile 读取大文件导致内存飙升,问题出在缓冲区分配策略
用户1839651
关注
发布于 2026-11-19 15:41:08
发布于 2026-11-19 15:41:08
12
0
举报
概述
线上一个日志分析服务偶尔会触发 OOM 重启,监控显示 RSS 在重启前半小时内从 300MB 涨到超过 2GB。服务本身并不复杂,主要逻辑是用 fs.readFile 读取上传的日志文件,按行拆解后写入数据库。上传的文件大小通常在 50MB 到 800MB 之间,运维同事一开始怀疑是数据库连接池泄漏,但用 heapdump 抓取快照后发现,堆外内存占用远高于堆内,而且有大量 Buffer 实例处
原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。
如有侵权,请联系
cloudcommunity@tencent.com
删除。
node.js
问题归档
专栏文章
快讯文章归档
关键词归档
开发者手册归档
开发者手册 Section 归档