腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
返回腾讯云官网
XSYMamba
专栏作者
举报
33
文章
71948
阅读量
14
订阅数
订阅专栏
申请加入专栏
全部文章(33)
编程算法(11)
python(6)
tcp/ip(4)
机器学习(3)
数据库(3)
sql(3)
神经网络(3)
深度学习(3)
numpy(3)
php(2)
人工智能(2)
线性回归(2)
微信(2)
私有网络(1)
java(1)
go(1)
bash(1)
node.js(1)
云数据库 SQL Server(1)
web.py(1)
ide(1)
api(1)
matlab(1)
bash 指令(1)
apt-get(1)
NAT 网关(1)
网站(1)
http(1)
anaconda(1)
windows(1)
数据结构(1)
nat(1)
搜索文章
搜索
搜索
关闭
Python如何处理大文件(知识整理)
node.js
java
数据库
sql
编程算法
数据量非常大时,比如一份银行一个月的流水账单,可能有高达几千万的record。对于一般性能的计算机,有或者是读入到特殊的数据结构中,内存的存储可能就非常吃力了。考虑到我们使用数据的实际情况,并不需要将所有的数据提取出内存。当然读入数据库是件比较明智的做法。若不用数据库呢?可将大文件拆分成小块按块读入后,这样可减少内存的存储与计算资源
用户5745385
2019-07-04
1.4K
0
没有更多了
社区活动
腾讯技术创作狂欢月
“码”上创作 21 天,分 10000 元奖品池!
立即发文
Python精品学习库
代码在线跑,知识轻松学
立即查看
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
立即体验
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
立即查看
领券
问题归档
专栏文章
快讯文章归档
关键词归档
开发者手册归档
开发者手册 Section 归档