问如何在csv的整个文件夹中读取和跳过没有任何列的项
EN

Stack Overflow用户

提问于 2022-09-15 15:12:51

回答 2查看 32关注 0票数 1

我使用下面的方法在csv的整个文件夹中读取。这些csv每天都被放到一个文件夹中，并反映已经发生的活动。当没有活动发生时，csv是空的，并且仍然有1KB的大小。如何使用此脚本跳过仍然具有文件大小的空文件？目前，我得到了错误：

EmptyDataError: No columns to parse from file

当前代码：

os.chdir('file_path')
file_extension = '.csv'
all_filenames = [i for i in glob.glob(f"*{file_extension}")]
df = pd.concat([pd.read_csv(t) for t in all_filenames], ignore_index=True,sort=False,axis=0)

pandas

dataframe

csv

python

Stack Overflow用户

发布于 2022-09-15 15:54:08

您可以始终处理异常，并生成将输入到concat函数中的数据文件列表。也许有一种方法可以把这个写成一个我不知道的人。下面是长篇版本：

os.chdir('file_path')
file_extension = '.csv'
all_filenames = [i for i in glob.glob(f"*{file_extension}")]

all_dataframes = []
for t in all_filenames:
    try:
        df = pd.read_csv(t)
        all_dataframes.append(df)
    except pd.io.common.EmptyDataError:
        print("empty csv encountered")
        # if for some reason you would prefer an empty dataframe
        #df = pd.DataFrame()
        #all_dataframes.append(df)

df = pd.concat(all_dataframes, ignore_index=True,sort=False,axis=0)

票数 1

查看全部 2 条回答

页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持

原文链接：

https://stackoverflow.com/questions/73733588

复制

相似问题

问如何在csv的整个文件夹中读取和跳过没有任何列的项
EN

Stack Overflow用户

社区

活动

圈层

关于

腾讯云开发者

热门产品

热门推荐

更多推荐

问如何在csv的整个文件夹中读取和跳过没有任何列的项EN

Stack Overflow用户

社区

活动

圈层

关于

腾讯云开发者

热门产品

热门推荐

更多推荐

问如何在csv的整个文件夹中读取和跳过没有任何列的项
EN