我想从我的文件夹中读取一些csv文件,并将它们连接到一个大熊猫数据帧中。我的所有csv文件都以一个数字结尾,我只想读取数字以(6~10,16~20,26~30)结尾的文件。我的目标是以迭代方式读取文件。附件是我到目前为止的代码:
import pandas as pd
data_one = pd.read_csv('Datafile-6.csv', header=None)
for i in range(7,11):
data99 = pd.read_csv('Datafile-'+i+'*.csv', header=None) #this line needs work
data_one = pd.concat([data_one, data99.iloc[:,1]],axis=1,ignore_index=True)
data_two = pd.read_csv('Datafile-16.csv', header=None)
for j in range(17,21):
#Repeat similar process如何处理'data99‘,使'data_one’包含从'Datafile-6‘到'Datafile-10’的列?
从数据文件6-10获取数据后,data_one的前五行应该如下所示。
0 1 2 3 4 5
0 -40.0 0.179836 0.179630 0.179397 0.179192 0.179031
1 -39.0 0.183696 0.183441 0.183204 0.182977 0.182795
2 -38.0 0.186720 0.186446 0.186191 0.185949 0.185762
3 -37.0 0.189490 0.189207 0.188935 0.188686 0.188475
4 -36.0 0.192154 0.191851 0.191569 0.191301 0.191086列0包含在所有数据文件中,所以我只连接所有后续数据文件的列1。
发布于 2018-08-25 02:08:54
您需要使用glob模块:
import glob, os
import pandas as pd
path =r'C:\YourFolder' #path to folder with .csv files
all = glob.glob(path + "/*.csv")
d_frame = pd.DataFrame()
list_ = []
for file_ in all:
df = pd.read_csv(file_,index_col=None, header=0)
if df['YourColumns'].tail(1).isin([6,7,8,9,10,16,17,18,19,20,26,27,28,29,30]) == True: #You can modify list with conditions you need
list_.append(df)
d_frame = pd.concat(list_)https://stackoverflow.com/questions/52009483
复制相似问题