前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >python 数据分析基础 day5-读写csv文件基础python读写csv文件通过pandas模块读写csv文件通过csv模块读写csv文件

python 数据分析基础 day5-读写csv文件基础python读写csv文件通过pandas模块读写csv文件通过csv模块读写csv文件

作者头像
billyang916
发布2018-05-02 10:11:47
3.4K0
发布2018-05-02 10:11:47
举报
文章被收录于专栏:python读书笔记python读书笔记

今天说一下使用python读写csv文件。 读写csv文件可以使用基础python实现,或者使用csv模块、pandas模块实现。

基础python读写csv文件

读写单个CSV

以下为通过基础python读取CSV文件的代码,请注意,若字段中的值包含有","且该值没有被引号括起来,则无法通过以下的简单代码获取准确的数据。

代码语言:javascript
复制
inputFile="要读取的文件名"
outputFile=“写入数据的csv文件名”
with open(inputFile,"r")  as fileReader:
  with open(outputFile,"w") as fileWriter:
    for row in fileReader:
      fileWriter.write(row)

读取多个csv文件并写入至一个csv文件

读写文件的代码与读写单个csv文件大致相同,但需要利用glob模块以及os模块获取需要读取的文件名。代码如下:

代码语言:javascript
复制
import os
import glob
inputPath="读取csv文件的路径"
outputFile="写入数据的csv文件名"
firstFile=True
for file in glob.glob(os.path.join(inputPath,"*.csv")):
    with open(file,'r') as fileReader:
        with open(outputFile,"a") as fileWriter:
            if firstFile:
                for row in fileReader:
                    fileWriter.write(row)
                firstFile=False
                fileWriter.write("\n")
            else:
                header=fileReader.readline()
                for row in fileReader:
                    fileWriter.write(row)

通过pandas模块读写csv文件

读写单个CSV

pandas的dataframe类型有相应的方法能读取csv文件,代码如下:

代码语言:javascript
复制
import pandas as pd
inputFile="要读取的文件名"
outputFile=“写入数据的csv文件名”
df=pd.read_csv(inputFile)
df.to_csv(outputFile)

请注意,若字段中的值包含有","且该值没有被引号括起来,则无法通过以下的简单代码获取准确的数据。

读取多个csv文件并写入至一个csv文件

代码语言:javascript
复制
import os
import glob
import pandas as pd
i
nputPath="读取csv文件的路径"
outputFile="写入数据的csv文件名"
dataFrameList=[]
for file in glob.glob(os.path.join(inputPath,"*.csv")): 
    df=pd.read_csv(file)
    dataFrameList.append(df)
allDataFrame=pd.concat(dataFrameList,axis=0,ignore_index=True)
allDataFrame.to_csv(outputFile)

通过csv模块读写csv文件

读写单个CSV文件

代码如下:

代码语言:javascript
复制
import csv
inputFile="要读取的文件名"
outputFile=“写入数据的csv文件名”
with open(inputFile,"r",newline='') as fileReader:
    with open(outputFile,"w",newline='') as fileWriter:
        csvReader=csv.reader(fileReader,delimiter=',')
        csvWriter=csv.writer(fileWriter,delimiter=',')
        for row in csvReader:
            print(row)
            csvWriter.writerow(row)

读取多个csv文件并写入至一个csv文件

思路与上述用基础python读取多个csv文件大体相同,代码如下:

代码语言:javascript
复制
import csv
import glob
import os

inputPath=r"读取csv文件的路径"
outputFile=r"输出文件的路径"
firstFile=True
for file in glob.glob(os.path.join(inputFile,"*.csv")):
    with open(file,"r") as fileReader:
        with open(outputFile,"a") as fileWriter:
            csvReader=csv.reader(fileReader)
            csvWriter=csv.writer(fileWriter)
            if firstFile:
                for row in csvReader:
                    csvWriter(row)
                firstFile=False
            else:
                header=next(csvReader,None)
                for row in csvReader:
                    csvWriter(row)
本文参与 腾讯云自媒体分享计划,分享自作者个人站点/博客。
原始发表:2018.03.18 ,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 基础python读写csv文件
    • 读写单个CSV
      • 读取多个csv文件并写入至一个csv文件
      • 通过pandas模块读写csv文件
        • 读写单个CSV
          • 读取多个csv文件并写入至一个csv文件
          • 通过csv模块读写csv文件
            • 读写单个CSV文件
              • 读取多个csv文件并写入至一个csv文件
              领券
              问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档