首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

盘点一个Python网络爬虫过程中Xpath提取器的问题

问客何为来,采山因买斧。

大家好,我是皮皮。

一、前言

前几天在Python钻石交流群【海南菜同学】问了一个网络爬虫的问题,这里拿出来给大家分享下。

下图是他获取到的内容:

其实就是多提取了这一行,提到了这个表格内容后,把下面的页码也一同提取了,然后那个页码很多,就显示一堆无用的信息。

二、实现过程

这里【瑜亮老师】给了一个思路,使用进行提取的,事半功倍,代码如下所示:

顺利地解决了粉丝的问题:

提取网页信息的方法还是挺多的。

后来【甯同学】也给了一个方法,使用方法解决的,代码如下:

里边有个匿名函数可能不太好理解,这里也给予说明了。

直接在代码中将空白字符、换行符什么的都清除掉了。

后来代码稍微优化了下,健壮性更强了。

三、总结

大家好,我是皮皮。这篇文章主要盘点了一个网络爬虫的问题,文中针对该问题,给出了具体的解析和代码实现,帮助粉丝顺利解决了问题。

最后感谢粉丝【海南菜同学】提问,感谢【瑜亮老师】、【甯同学】给出的思路和代码解析,感谢【eric】等人参与学习交流。

/今日留言主题/

随便说一两句吧~~

  • 发表于:
  • 原文链接https://kuaibao.qq.com/s/20230309A0243600?refer=cp_1026
  • 腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。
  • 如有侵权,请联系 cloudcommunity@tencent.com 删除。

相关快讯

扫码

添加站长 进交流群

领取专属 10元无门槛券

私享最新 技术干货

扫码加入开发者社群
领券