“在看”和“赞”。
免 cookie cn 微博话题爬虫
大家好,我是刚下班的并更新了微博话题爬虫的月小水长。
首先是今天的主人公:不需要复制 cookie 的话题爬虫,它是针对 weibo.cn 这个站点的,只需要改动目标话题,就可以开始爬取了,代码已经放到 WeiboSuperSpider 的 Github 仓库了。在功能独立版文件夹下,取名 WeiboCnTopicSpiderWithoutCookie。
https://github.com/Python3Spiders/WeiboSuperSpider
或者点击文末阅读原文即可直达源代码。
com 话题爬虫 BugFix
其次是更新了 WeiboCom 话题爬虫的 bug,这周刚发布 2021 微博爬虫更新及使用指南 ,有读者留言反馈了以下的 bug
现今暂时修复,但是爬虫不会自动停下来了,需手动关停。修复的爬虫文件,获取方式依然在 2021 新版微博话题爬虫发布,回复同样的口令即可获取更新。
com 和 cn 话题爬虫对比
对于话题搜索这个爬虫,在 weibo.com 和 weibo.cn 这两个站点都可以爬取;
这里给新开的微信小店留个位置,感兴趣的可以看看~
谢谢大家关注,微博爬虫将持续更新,明早或周一更新微博用户信息爬虫~