首页
学习
活动
专区
圈层
工具
发布
社区首页 >专栏 >Node.js 中 fs.readFile 与 createReadStream 处理大文件的内存陷阱

Node.js 中 fs.readFile 与 createReadStream 处理大文件的内存陷阱

作者头像
用户1839651
发布于 2026-11-18 14:36:47
发布于 2026-11-18 14:36:47
210
举报
概述
线上一个日志分析服务在读取 200MB 的访问日志时频繁触发 OOM,容器内存限制是 512MB,而日志文件平均每天增长 150MB 左右。服务逻辑很简单:用 fs.readFile 把整个日志读进内存,按行拆分后统计状态码和耗时分布。单次请求内存峰值轻松超过 400MB,并发两个请求就直接被内核杀掉。这个场景本质上是把「流式处理」的问题当成了「一次性加载」来处理。Node.js 里 fs.rea

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档