超哥前端记录
Node.js 中流式处理大文件时内存暴涨的排查与优化
原创
关注作者
腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
超哥前端记录
社区首页
>
专栏
>
Node.js 中流式处理大文件时内存暴涨的排查与优化
Node.js 中流式处理大文件时内存暴涨的排查与优化
超哥前端记录
关注
发布于 2026-11-03 09:55:37
发布于 2026-11-03 09:55:37
101
0
举报
概述
最近在维护一个日志分析服务时遇到一个比较典型的问题:服务需要定期读取几百 MB 的访问日志文件,按行解析后写入数据库。最初用 fs.readFile 一次性读取整个文件,在本地跑小文件没问题,但上线后遇到大文件直接触发 OOM,进程被系统 kill 掉。换成 fs.createReadStream 之后情况有所好转,但内存曲线依然会随着处理推进持续上涨,最终稳定在一个偏高的水平。这类问题在日志处理
原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。
如有侵权,请联系
cloudcommunity@tencent.com
删除。
node.js
问题归档
专栏文章
快讯文章归档
关键词归档
开发者手册归档
开发者手册 Section 归档