前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >Python:读写csv文件

Python:读写csv文件

作者头像
新码农
发布2020-04-16 11:35:15
1.6K0
发布2020-04-16 11:35:15
举报
文章被收录于专栏:新码农博客

1、读文件

代码语言:javascript
复制
import csv

csv_reader = csv.reader(open("data.file", encoding="utf-8"))
for row in csv_reader:
    print(row)

csv_reader把每一行数据转化成了一个list,list中每个元素是一个字符串。

2、写文件

读文件时,我们把csv文件读入列表中,写文件时会把列表中的元素写入到csv文件中。

代码语言:javascript
复制
list = ["1", "2", "3", "4"]
out = open(outfile, "w")
csv_writer = csv.writer(out)
csv_writer.writerow(list)

可能遇到的问题:直接使用这种写法会导致文件每一行后面会多一个空行。

解决办法如下:

代码语言:javascript
复制
out = open(outfile, "w", newline="")
csv_writer = csv.writer(out, dialect="excel")
csv_writer.writerow(list)

在stackoverflow上找到了比较经典的解释,原来 python3里面对 str和bytes类型做了严格的区分,不像python2里面某些函数里可以混用。所以用python3来写wirterow时,打开文件不要用wb模式,只需要使用w模式,然后带上newline=''。

3、示例

  • 简单读写
代码语言:javascript
复制
import csv


class writer:
    def __init__(self):
        self.dict = {
            "标题": "标题",
            "链接": "链接",
            "服务": "服务",
            "dsr": "dsr",
            "店铺名": "店铺名",
            "价格": "店铺名",
            "付款人数": "付款人数",
            "发货地": "发货地",
        }
        out = open("outfile.csv", "w", newline="")
        self.csv_writer = csv.writer(out, dialect="excel")
        self.csv_writer.writerow(self.dict)

    def writer_to(self, key_value):
        self.csv_writer.writerow(key_value)


if __name__ == "__main__":
    a = writer()
    new = {
        "链接": "http://www.baidu.com",
        "标题": "我是标题",
    }
    a.dict.update(new)
    print(a.dict)
    a.writer_to(a.dict.values())
  • 结合爬虫
代码语言:javascript
复制
import csv
from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
from selenium.common.exceptions import TimeoutException, NoSuchElementException
from selenium.webdriver.common.action_chains import ActionChains

driver = ["1", "2"]
colspan = ["1", "2"]
try:
    out = open("类目.csv", "w", newline="")
except PermissionError:
    print("文件被其他程序占用")
    input("")
csv_writer = csv.writer(out, dialect="excel")
csv_writer.writerow(["宝贝ID", "类目"])


def open_chrome():
    driver[0] = webdriver.Chrome()
    driver[0].get("https://www.dianchacha.com")
    input("请登陆后按回车:")


def EC_located(one_group, value):
    """
     目的:简化代码长度,参数1选择one或者group切换选中模式
    :param value:要找的值【CSS选择器】
    :return:选择到的对象
    """
    wait = WebDriverWait(driver[0], 10)
    if one_group == "one":
        try:
            ecl = wait.until(EC.presence_of_element_located((By.CSS_SELECTOR, value)))
            return ecl
        except TimeoutException:
            print(value, "1元素未加载成功,等待超时")
    else:
        try:
            ecl = wait.until(
                EC.presence_of_all_elements_located((By.CSS_SELECTOR, value))
            )
            return ecl
        except TimeoutException:
            print(value, "1元素---组---未加载成功,等待超时")


def operating(ID):
    # 先获取ID输入框
    driver[0].get("https://www.dianchacha.com/item/info/index/iid/" + ID)
    html = driver[0].page_source
    if "未能找到亲的宝贝" not in html:
        colspans = EC_located("group", ".colspan-1")
        colspan[0] = str(colspans[1].text).replace("宝贝类目: ", "")
    else:
        return operating(ID)
    print(colspan)


def writer_txt():
    csv_writer.writerow([url[0], colspan[0]])
    print("保存", url[0], colspan[0], "成功")


url = ["0", "1"]


def main():
    open_chrome()
    file = "宝贝ID.txt"
    with open(file) as f:
        for line in f.readlines():
            url[0] = line
            print(line)
            operating(url[0])
            writer_txt()
        out.close()
        print("已完成")


if __name__ == "__main__":
    main()
本文参与 腾讯云自媒体同步曝光计划,分享自作者个人站点/博客。
原始发表:2020年4月5日 1,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 1、读文件
  • 2、写文件
  • 3、示例
相关产品与服务
文件存储
文件存储(Cloud File Storage,CFS)为您提供安全可靠、可扩展的共享文件存储服务。文件存储可与腾讯云服务器、容器服务、批量计算等服务搭配使用,为多个计算节点提供容量和性能可弹性扩展的高性能共享存储。腾讯云文件存储的管理界面简单、易使用,可实现对现有应用的无缝集成;按实际用量付费,为您节约成本,简化 IT 运维工作。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档