首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >专栏 >爬取微博热搜评论生成词云

爬取微博热搜评论生成词云

作者头像
用户6825444
发布2019-12-18 11:56:45
发布2019-12-18 11:56:45
4.4K1
举报
文章被收录于专栏:木下学Python木下学Python

前言

微博大家都很熟悉了,时不时就谁谁上了热搜,底下评论什么都有,我们想获得评论信息做个简单的分析,可以用爬虫爬取,但花费的时间可能有点多,还会面临反爬,微博给我们开了 api 接口,我们可以调用方便的获取数据,带来了不少便利,小编带大家来爬取评论内容

api 配置

https://open.weibo.com/

打开,注册一个账号,按照下列序号新建应用,完善基本信息

  1. 点击【我的应用】,完善基本信息
  2. 完善后的样子
  3. 点击【微连接】【其他】,新建应用
  4. 点击建好的应用

App Key,App Secret 是接口需要的密匙

授权回调页,取消授权回调页都写为:https://api.weibo.com/oauth2/default.html

文档查看

我们点击【文档】,找到评论接口,我们选择【获取某条微博的评论】

点开文档后,里面都有详细参数,我们只需要评论的数据,还有其它的数据,用户 id,地区等数据,你可以自制选择玩出你的花样

怎么接入授权爬取数据文档也有

接入代码

接入代码要先获得授权的 taken,其中要用到 App Key,App Secret

运行代码会要输入 code,code 是运行后,会弹出一个 web 界面,在 url 后面,输入这个 code 就可以开始爬取了

爬取

打开一条微博,找到它的 id,一般就是 url 后面那串数字

接下来写爬取逻辑,其中画线的是接入方法,id 是刚刚的 id,count 设置一页获得数量,默认50

这样我们就爬取成功了

生成词云

final

听说点“在看”的人都变得更好看咯~

-END-

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2019-12-12,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 木下学Python 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档