在Python中使用Pandas处理对于excel而言太大的数据集
在Python中使用Pandas处理对于excel而言太大的数据集
提问于 2020-12-03 16:09:11
我有一个关于在python中使用pandas分析大型excel表格的快速应用程序问题。
对于有数百万行的数据(超出Excel的限制)，我们如何通过pandas来分析它们？
我知道excel可以让你从一个文本文件中加载数据，并让你的excel电子表格“创建一个连接”到源文件，而不必直接加载所有数百万行。如果我们在python中使用pandas调用这个excel电子表格，我们是否能够对源文件中数百万行的所有行使用我们的筛选操作(以及我们学到的所有其他表数据分析操作)？或者它只会在excel工作表上显示的内容上执行(假设我们已经选择了源文本文件的“创建连接”选项)？
有没有一种更有效的方式直接使用pandas和sas文件？
回答 1
Stack Overflow用户
发布于 2020-12-03 17:27:12
我认为通过小块获取文件可以提高过程的效率。请看这个link
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接：
https://stackoverflow.com/questions/65122027
复制相关文章
相似问题
腾讯云开发者
