前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >Scrapy输出中文保存中文

Scrapy输出中文保存中文

作者头像
林清猫耳
发布2019-03-04 17:41:51
2.8K0
发布2019-03-04 17:41:51
举报
文章被收录于专栏:我爱编程
scrapy在保存json文件时容易乱码
settings.py文件改动:
代码语言:javascript
复制
ITEM_PIPELINES = {
   'tutorial.pipelines.TutorialPipeline': 300,
}
pipeline.py文件改动:
代码语言:javascript
复制
import json
import codecs

class TutorialPipeline(object):
    def __init__(self, spider):
        self.file = codecs.open('data_cn.json', 'w', encoding='utf-8')

    def process_item(self, item, spider):
        line = json.dumps(dict(item), ensure_ascii=False) + '\n'
        self.file.write(line)
        return item

    def close_spider(self, spider)
        self.file.closOline()
本文参与 腾讯云自媒体同步曝光计划,分享自作者个人站点/博客。
原始发表:2019.02.16 ,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • scrapy在保存json文件时容易乱码
    • settings.py文件改动:
      • pipeline.py文件改动:
      领券
      问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档