首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >问答首页 >Python:阅读我文件夹中的多个csv文件,但不是所有csv文件

Python:阅读我文件夹中的多个csv文件,但不是所有csv文件
EN

Stack Overflow用户
提问于 2018-08-25 01:49:08
回答 1查看 89关注 0票数 1

我想从我的文件夹中读取一些csv文件,并将它们连接到一个大熊猫数据帧中。我的所有csv文件都以一个数字结尾,我只想读取数字以(6~10,16~20,26~30)结尾的文件。我的目标是以迭代方式读取文件。附件是我到目前为止的代码:

代码语言:javascript
运行
复制
import pandas as pd

data_one = pd.read_csv('Datafile-6.csv', header=None)
for i in range(7,11):
    data99 = pd.read_csv('Datafile-'+i+'*.csv', header=None) #this line needs work
    data_one = pd.concat([data_one, data99.iloc[:,1]],axis=1,ignore_index=True)

data_two = pd.read_csv('Datafile-16.csv', header=None)
for j in range(17,21):
    #Repeat similar process

如何处理'data99‘,使'data_one’包含从'Datafile-6‘到'Datafile-10’的列?

从数据文件6-10获取数据后,data_one的前五行应该如下所示。

代码语言:javascript
运行
复制
      0         1         2         3         4         5
0 -40.0  0.179836  0.179630  0.179397  0.179192  0.179031
1 -39.0  0.183696  0.183441  0.183204  0.182977  0.182795
2 -38.0  0.186720  0.186446  0.186191  0.185949  0.185762
3 -37.0  0.189490  0.189207  0.188935  0.188686  0.188475
4 -36.0  0.192154  0.191851  0.191569  0.191301  0.191086

列0包含在所有数据文件中,所以我只连接所有后续数据文件的列1。

EN

回答 1

Stack Overflow用户

发布于 2018-08-25 02:08:54

您需要使用glob模块:

代码语言:javascript
运行
复制
import glob, os
import pandas as pd

path =r'C:\YourFolder' #path to folder with .csv files
all = glob.glob(path + "/*.csv")
d_frame = pd.DataFrame()
list_ = []
for file_ in all:
    df = pd.read_csv(file_,index_col=None, header=0)
    if df['YourColumns'].tail(1).isin([6,7,8,9,10,16,17,18,19,20,26,27,28,29,30]) == True: #You can modify list with conditions you need
        list_.append(df)
d_frame = pd.concat(list_)
票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/52009483

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档