想象一下,我正在读取一个csv文件中的数字,如下所示:
1,6.2,10
5.4,5,11
17,1.5,5
...
而且它真的很长。
我将使用csv阅读器遍历此文件,如下所示:
import csv
reader = csv.reader('numbers.csv')
现在假设我有一些函数可以接受像max这样的迭代器:
max((float(rec[0]) for rec in reader))
这会找到第一列的最大值,而不需要将整个文件读取到内存中。
但是,如果我想对csv文件的每一列运行max,而不将整个文件读取到内存中,该怎么办?
如果max像这样重写:
def max(iterator):
themax = float('-inf')
for i in iterator:
themax = i if i > themax else themax
yield
yield themax
然后,我可以做一些花哨的工作(并且必须)来实现这一点。
但是如果我约束问题并且不允许重写max呢?这个是可能的吗?
谢谢!
发布于 2014-01-28 08:03:05
我将不再使用传递迭代器的函数,而是自己在阅读器上迭代:
maxes = []
for row in reader:
for i in range(len(row)):
if i > len(maxes):
maxes.append(row[i])
else:
maxes[i] = max(maxes[i], row[i])
最后,您将获得包含每个最大值的列表maxes
,而无需在内存中存储整个文件。
https://stackoverflow.com/questions/21394296
复制相似问题