python爬虫小知识,中文在url中的编码解码

有时候我们做爬虫经常会遇到这种编码格式,大概的样式为 %xx%xx%xx,对于这部分编码,python提供了一个quote的方法来编码,对应的解码为unquote方法。

导入

quote方法是urllib库的一个方法,它的导入方式为

from urllib.parse import quote,unquote

不需要安装,urllib库是python自带的一个库,直接导入就可以使用。

编码、解码

直接上实例

额。。。大家请忽略那些波浪线。。。因为我的pycharm很旧了,版本没有更新,所以,用f-string会提示错误,但实际上能运行的。

通过上图可以看到,很简单的方式就可以编码和解码了!需要注意的就是它们的格式必须一致,否则会出现乱码的!

关于爬虫

今天给大家分享的就是这些,有的网站的参数或者url里,是需要把中文转换为特殊格式才可以的,那么就会用到今天的这个方法,而且它本身还有其他的很多功能,比如部分转换等等功能。

最近迷上了GUI做程序,在做一个爬虫下载+列表播放的小项目,做完后在分享出来,大家加油!

原创声明,本文系作者授权云+社区发表,未经许可,不得转载。

如有侵权,请联系 yunjia_community@tencent.com 删除。

编辑于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏linux系统运维

管道符和作业控制,shell变量和环境变量配置文件

20350
来自专栏运维小白

5.5 进入编辑模式

编辑模式:就是进入到可以编辑文本文件的模式 ? 进入编辑模式方法: i ,直接在当前光标处进入编辑模式 I (大写I),光标直接移动到该行的行首,并进入编辑...

20670
来自专栏云飞学编程

python爬虫小知识,中文在url中的编码解码

有时候我们做爬虫经常会遇到这种编码格式,大概的样式为 %xx%xx%xx,对于这部分编码,python提供了一个quote的方法来编码,对应的解码为unquot...

9230
来自专栏用户2442861的专栏

Linux下动态库(.so)和静态库(.a) 的区别

动态库(共享库)的代码在可执行程序运行时才载入内存,在编译过程中仅简单的引用,因此代码体积比较小。

3.2K10
来自专栏信安之路

看我如何收集全网IP的whois信息

今天给大家分享几个脚本,看看如何收集全网whois信息。首先了解一下whois.py这个基本程序。

16100
来自专栏一个爱瞎折腾的程序猿

常用cmd代码片段及.net core打包脚本分享

保存:set currentPath=%cd% 输出:echo %currentPath

12730
来自专栏刘望舒

React Native探索(五)使用fetch进行网络请求

前言 React Native可以使用多种方式来进行网络请求,比如fetch、XMLHttpRequest以及基于它们封装的框架,fetch可以说是替代XMLH...

32670
来自专栏佳爷的后花媛

我的PHP常用代码段

后台进行修改操作时,没有修改图片,再次刷新图片地址为空? 需要在修改函数中加入一个去除空字符串的函数.

14920
来自专栏编程理解

Linux命令使用:gzip、bzip2与zip

文件的压缩/解压操作在日常使用中很常见,压缩后的文件可以节省存储空间,又方便进行网络传输。

14120
来自专栏码生

python 中文处理方法

python 中如果没有指定编码方式的话,那么默认支持的是ASCII码,如果出现中文则会报错,即便中文是注释也不行

11810

扫码关注云+社区

领取腾讯云代金券