scrapy unicode编码问题

简单、

发布于 2018-07-18 14:40:00

86000

代码可运行

运行总次数：0

代码可运行

scrapy 在爬虫的时候使用xpath提取到的信息全部是 u'u5c97....'这样的字符。所以这样的话在输出的时候不知道自己提取到的信息到底有木有啊=-= 解决方案：

在spider程序中。输出的时候加这两句，当然需要先import codecs json

 item = json.dumps(dict(item)) + "\n"

 ss = item.decode('unicode_escape')

 print ss

存储的时候遇到编码问题需要这样写：

然后再setting里面将ITEM_PIPELINES的注释取消掉。

Tags: None

本文参与腾讯云自媒体同步曝光计划，分享自作者个人站点/博客。

如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自作者个人站点/博客前往查看

如有侵权，请联系 cloudcommunity@tencent.com 删除。

本文参与腾讯云自媒体同步曝光计划，欢迎热爱写作的你一起参与！

登录后参与评论

0 条评论

热度