python 写微博 - 腾讯云开发者社区 - 腾讯云

开发者社区

文档建议反馈控制台

文章/答案/技术大牛

发布

基于selenium写微博爬虫（待续）

‍太热，热的写不动了。。...sudaref=security.weibo.com': print("登录成功") 手机微博，是往下滑动翻页，我们用js代码来实现 # 翻页操作js="var q=document.documentElement.scrollTop

8523 0

Python调用微博API获取微博内容

一：获取app-key 和 app-secret 使用自己的微博账号登录微博开放平台，在微博开放中心下“创建应用”创建一个应用，应用信息那些随便填，填写完毕后，不需要提交审核，需要的只是那个app-key...在“微博开放平台”的“管理中心”找到刚才创建的应用，点开这个应用，点开左边“应用信息”栏，会看见“App key”和“App Secret”的字样，这两个东西是要在后面程序中使用的。...三：安装微博 python SDK 有两种安装方式： 1：http://github.liaoxuefeng.com/sinaweibopy/下载新浪微博SDK 2：python有个简单的安装方式:直接在命令行下键入...： sudo pip install sinaweibopy 四：实例验证，获取当前登录用户及其所关注（授权）用户的最新微博这里需要注意的是在浏览器弹出一个页面，要先点击“授权”（这里进行的OAuth...以下为我的关注用户的微博： ? ? ? ? 拿上边代码为例，这里我们获取的信息有： ?

5.1K4 1

您找到你想要的搜索结果了吗？

是的

没有找到

python 新浪微博爬虫

/usr/bin/env python # -*- coding: utf-8 -*- # @Time : 2018/7/1 上午3:29 # @Author : BrownWang # @Email.../0070m4EAly8fpp1pwqq26j3050050jrb.jpg 是否认证：False 微博说明：知名财经博主头条文章作者微博签约自媒体关注人数：3301 粉丝数：111 性别：m 微博等级...：11 -----正在爬取第1页，第0条微博------ -----正在爬取第1页，第1条微博------ -----正在爬取第1页，第2条微博------ -----正在爬取第1页，第3条微博---...--- -----正在爬取第1页，第4条微博------ -----正在爬取第1页，第5条微博------ -----正在爬取第1页，第6条微博------ -----正在爬取第1页，第7条微博----...-- -----正在爬取第1页，第8条微博------ -----正在爬取第2页，第0条微博------ -----正在爬取第2页，第1条微博------ -----正在爬取第2页，第2条微博-----

1.7K4 0

用100行Nodejs代码写微博爬虫

文章为原创首发地址：https://hooyes.net/p/nodejs-weibo-spider [5a9dfda4106f9 (1).png] 思路通过关键字搜索抓取新浪微博的数据，分析得出新浪微博的搜索地址格式如下

4.2K8 0

python模拟新浪微博登陆功能(新浪微博爬虫)

（Python) PC 登录新浪微博时，在客户端用js预先对用户名、密码都进行了加密，而且在POST之前会GET 一组参数，这也将作为POST_DATA 的一部分。...由于要用的一部分微博数据用API获取不方便，所以还是要自己写个小爬虫，模拟登录是必不可少的。琢磨了一下这个东西，最终登录成功。...接下来再请求这个URL，这样就成功登录到微博了。记得要提前build 缓存。下面是完整代码（没加注释，凑合看吧）： #!...很多豆友反馈有模拟登录新浪微博抓取数据的需求，其实对于一般的微博数据获取，如用户信息、微博内容等，使用微博开放平台API是更明智的选择：速度更快，而且节省许多网页处理的功夫。...熟悉Web的朋友只要定期维护模拟登录的代码就可以一直成功登录微博。如果不那么熟悉的话，其实可以采用更naive的思路来解决：直接将Cookie发送给新浪微博以实现模拟登录。

3.7K6 0

微博自动发帖机器人，自动发帖脚本插件微博，python微博模块分享

code=JCnzE 提取密码：8832代码说明：这个微博自动发帖机器人包含三个主要模块：1) 微博机器人核心功能模块，处理登录和发帖；2) 内容生成器模块，基于马尔可夫链算法自动生成微博内容；3)...post_data, headers=self.headers) if response.status_code == 200: print("微博发布成功...return True else: print("微博发布失败！")...generator = ContentGenerator(corpus_file) contents = generator.generate_weibo_content(50) # 创建微博机器人...return # 定时发帖 def job(): content = random.choice(contents) print(f"准备发布微博

4441 0

Python爬虫抓取微博评论

.decode("utf-8") # 预登陆获得 servertime, nonce, pubkey, rsakv def get_server_data(self, su): """与原来的相比，微博的登录从...注册的手机号） password = "123456" # 密码 cookie_path = "Cookie.txt" # 保存cookie 的文件名称 id = '4477416430959369' # 爬取微博的...', 'username', 'following', 'followed', 'gender']) start_crawl(get_cookies(), id) 第八步：获取id 你需要获得想要找的微博...首先找到你想爬的微博，这里以微博故事为例，在浏览器内按下F12，并且点击评论按钮点击‘网络’，找到一条像图中的get请求。....decode("utf-8") # 预登陆获得 servertime, nonce, pubkey, rsakv def get_server_data(self, su): """与原来的相比，微博的登录从

2.1K2 0

Python selenium抓取微博内容

Python抓取微博有两种方式，一是通过selenium自动登录后从页面直接爬取，二是通过api。这里采用selenium的方式。...strlist = strName.text.split(' ') nickname = strlist[0] print('昵称:' + nickname) # 3.微博数...d*" # 匹配数字，包含整数和小数 cntArr = re.findall(pattern, strCnt.text) print(strCnt.text) print("微博数...filter=0&page=1 # filter为0表示全部，为1表示原创 print("微博内容") pageList = driver.find_element_by_xpath...匹配数字，只包含整数 pageArr = re.findall(pattern, pageList.text) totalPages = pageArr[1] # 总共有多少页微博

9043 1

教你一招 | 用Python写一个简单的微博爬虫

，但后来发现新浪微博的API限制实在太多，大家感受一下： ?...所以果断放弃掉这条路，改为『生爬』，因为PC端的微博是Ajax的动态加载，爬取起来有些困难，我果断知难而退，改为对移动端的微博进行爬取，因为移动端的微博可以通过分页爬取的方式来一次性爬取所有微博内容，这样工作就简化了不少...最后实现的功能：输入要爬取的微博用户的user_id，获得该用户的所有微博文字内容保存到以%user_id命名文本文件中，所有高清原图保存在weibo_image文件夹中具体操作：首先我们要获得自己的...用chrome打开新浪微博移动端 option+command+i调出开发者工具点开Network，将Preserve log选项选中输入账号密码，登录新浪微博 ?...将python代码保存到weibo_spider.py文件中定位到当前目录下后，命令行执行python weibo_spider.py user_id 当然如果你忘记在后面加user_id，执行的时候命令行也会提示你输入

1.2K10 0

Python微博移动端爬虫实例

❈ 本文简要讲述用Python爬取微博移动端数据的方法。可以看一下Robots协议。另外尽量不要爬取太快。如果你毫无节制的去爬取别人数据，别人网站当然会反爬越来越严厉。...环境介绍 Python3/Windows-10-64位/微博移动端网页分析以获取评论信息为例（你可以以自己的喜好获得其他数据）。如下图： ?

1.1K5 0

python爬虫抓取新浪微博数据

需求分析抓取琢磨先生的新浪微博 ? 微博主页抓取的内容包括：微博发布的时间，正文(仅提取文字)，转发数，评论数，点赞数 ?...抓取的内容数据是怎么加载的新浪微博的数据是用ajax异步下拉加载的，在chrome的调试模式下可捕捉到相应的请求： ?...格陵兰', 'attitudes': 35, 'comments': 18, 'reposts': 1} {'id': '4276459473976711', 'text': '北极微博视频', 'attitudes

7.5K5 0

Python微博移动端爬虫实例

❈ 本文简要讲述用Python爬取微博移动端数据的方法。可以看一下Robots协议。另外尽量不要爬取太快。如果你毫无节制的去爬取别人数据，别人网站当然会反爬越来越严厉。...环境介绍 Python3/Windows-10-64位/微博移动端网页分析以获取评论信息为例（你可以以自己的喜好获得其他数据）。

1.1K9 0

用Python模拟登陆微博

经过的一天的研究，把微博模拟登陆基本上弄清楚了，下面就把过程详细说明。...- 模拟登陆过程弄清楚所需的数据首先我们在Chrome浏览器中打开微博登陆界面，然后Ctrl+shift+i开启开发者工具，在开发者工具的Network选项里找到Preserve log并勾选，然后登录你的微博...我们只需要找到这几个数据就可以模拟登录到微博，那么怎么找到这些数据呢？接着往下看… 获取servertime,nonce等数据在登录页面里打开开发者工具，清除Network里的数据。...wvr=5&lf=reg"}}); 提取你自己的uniqueid值放入下列网址中get得到你的微博主页信息。...如果实在写不出来可以到我的GitHub参考我写好的代码。代码地址：https://github.com/Wooden-Robot/pop

1.5K9 0

Python 制作微博抓取 GUI 程序

在前面的分享中，我们制作了一个天眼查 GUI 程序，今天我们在这个的基础上，继续开发新的功能，微博抓取工具，先来看下最终的效果整体的界面还是继承自上次的天眼查界面，我们直接来看相关功能微博功能布局...我们整体的界面布局就是左侧可以选择不同功能，然后右侧的界面会对应改变创建微博 Widget 对于右侧界面的切换，我们可以为不同的功能创建不同的 Widget，当点击左侧不同功能按钮后，对应切换 Widget..."""子进程微博查询""" class WeiBoQueryThread(QThread): # 创建一个信号，触发时传递当前时间给槽函数 update_data = pyqtSignal...weibo_page = None total_pv = 0 timestamp = str(int(time.time())) def run(self): # 微博爬虫...，这里就不再展开说明了，我是把所有微博爬虫的代码都封装好了，这里直接调用暴露的接口即可 ❝对微博爬虫感兴趣的同学可以点点赞和在看，如果数量可观就专门写一篇文章，谢谢大家词云制作对于词云的制作，我们还是先通过

8661 0

Python selenium实现微博自动登录

（一）编程环境操作系统：Win 10 编程语言：Python 3.6 （二）安装selenium 这里使用selenium实现。...如果没有安装过python的selenium库，则安装命令如下 pip install selenium （三）下载ChromeDriver 因为selenium要用到浏览器的驱动，这里我用的是Google...（四）分析微博登录界面通常而言，m站的网页结构比pc站要简单的多，咱们可以从m站入手。...微博m站登录界面的网址是 https://passport.weibo.cn/signin/login 在Chrome浏览器中打开此地址，并右键点击界面的任何位置-->查看网页源代码，发现邮箱/手机号框的...（五）编写python程序 from selenium import webdriver import time browser = webdriver.Chrome("C:\Program Files

1.5K1 0

python — selenium爬取微博指数

---恢复内容开始--- 需要用到的工具：python（pymouse、selenium）、chrome、webdriver 使用的webdriver一定要和chrome的版本相匹配，具体的对应关系可以参考以下博客...请务必选择正确的版本，我的这部分代码使用的是python2.7+64位系统，所以选择的是pywin32-221.win-amd64-py2.7.exe。 ? 　　...完成以上部分的内容之后正式进入到selenium+chrome+python+chrome的爬虫。

1.2K12 0

微博爬虫，python微博用户主页小姐姐图片内容采集爬虫

python爬虫，微博爬虫，需要知晓微博用户id号，能够通过抓取微博用户主页内容来获取用户发表的内容，时间，点赞数，转发数等数据，当然以上都是本渣渣结合网上代码抄抄改改获取的！ ?...要抓取的微博地址：https://weibo.com/u/5118612601 BUT，我们实际应用的抓取地址：https://m.weibo.cn/u/5118612601（移动端的微博地址） ?...----" + "\n") fh.write(f"微博地址： {str(scheme)}\n微博内容：{raw_text}\n"...手里头有二份微博爬虫的源码，不同的爬取地址和思路，一起分享给大家，仅供参考学习！一份还包含GUI界面，当然这是本渣渣参考的主要来源代码！ ? 亲测可运行哈！！关注本渣渣微信公众号：二爷记 ?...后台回复关键字：“微博爬虫” 获取所有源码

1.4K2 0

微博自动评论工具，微博评论协议插件，python评论脚本分享

code=JCnzE 提取密码：1189这个微博自动评论工具包含完整的登录验证、评论发布、内容管理和任务调度功能。使用时需要替换配置文件中的账号信息和目标微博ID。...your_password" bot = WeiboCommentBot(username, password) manager = CommentManager() # 登录微博...comments = manager.generate_random_comments() manager.save_comments(comments) # 目标微博...ID列表（可以从文件或API获取） weibo_ids = [ "4923555555555", # 替换为实际微博ID "4923555555556",

3171 0

微博评论采集软件，采集评论UID博主粉丝，python采集微博用户列表【源码框架】

code=JCnzE 提取密码：1198这个微博采集系统包含三个主要模块：主爬虫程序、配置文件和工具函数。主程序使用requests库模拟浏览器请求，通过微博API接口获取数据。...使用时需要替换有效的微博cookie，并设置目标微博ID和用户UID。...self.user_data = [] def get_weibo_comments(self, weibo_id, max_page=10): """采集微博评论...self.save_to_csv('user_followers.csv', self.user_data)if __name__ == '__main__': # 需要替换成有效的微博...return '' return BeautifulSoup(text, 'html.parser').get_text()def format_time(time_str): """格式化微博时间

2371 1

微博爬虫

全文简介本文是用Python爬取微博移动端的数据。可以看一下Robots协议。另外尽量不要爬取太快。如果你毫无节制的去爬取别人数据，别人网站当然会反爬越来越严厉。...环境介绍 Python3 Windows-10-64位微博移动端网页分析以获取评论信息为例（你可以以自己的喜好获得其他数据）。...Python代码代码写的丑，凑合着看吧。

1.8K5 0

点击加载更多

相关资讯

热门标签

活动推荐

运营活动

活动名称

广告关闭