利用python爬取豆瓣电影排行榜（https://movie.douban.com/chart)的数据并保存到excel中。用相同代码爬取网页豆瓣top250的数据可以爬取到excel中，但将网址及相关信息改为网页豆瓣电影排行榜中的信息时便无法爬取，也找不出问题所在。以下图片为完整代码。
浏览 340提问于2021-01-09
我的本意是只想爬取xxxxx，为何标签也被爬取了呢
图片
浏览 61提问于2023-08-23
1回答
由于现在Twitter API 数据爬取付费，所以我想在不使用Twitter API的情况下使用python爬取到特定关键词的Twitter数据或者Reddit数据，有什么好办法吗？
浏览 703提问于2024-01-06
2回答
我写了一个网络爬虫，它在do while循环中调用网页，循环时间为3秒 总共有7000个网站...我解析数据并将其保存在我的数据库中。
浏览 0提问于2010-01-22得票数 0
比如，用huginn爬网这个链接：
https://s.weibo.com/weibo?换了其他地方的机器，电脑和ip不同，huginn照样无法正常爬取。而在同一台机器上用 下载工具甚至简单的脚本下载这个链接的网页内容，却可以实现，不知道是什么情况。
浏览 114提问于2021-09-28
如题，我最近在做一个数据分析，想要用到美团的美食信息，于是就想用python爬取美团的数据，但是在构造爬虫的时候发现美团有一个_token参数，百思不得其解，还请大神指教
浏览 2259提问于2018-09-12
1回答
我的网站在mozila上工作正常，但当我们转到IE 8时，它在状态栏上显示错误User Agent: Mozilla/4.0 (compatible; MSIE 8.0; Windows
浏览 0提问于2011-04-04得票数 0
1回答
网页由CGI程序生成。大多数网页的URL都包含诸如?id=2323&title=foo之类的表达式。然而，我面临的一个问题是，这个网站有一个日历。也会生成一些类似日期的网页。这意味着纳奇将试图抓取一些无害的网页，如year=2030&month=12。如何在Nutch中避免这样的陷阱？编写很多正则表达式？
浏览 1提问于2012-01-27得票数 0
回答已采纳
5回答
从网站的单个目录下载所有图片
、、、、
我需要从一个网站上获得所有的图像都包含在一个文件夹中。例如，(site.com/images/.*)。这个是可能的吗？如果是这样，最好的方法是什么？
浏览 0提问于2011-01-07得票数 7
回答已采纳
0回答
from selenium import webdriverfrom selenium.webdriver.firefox.options import Optionsimport timefrom
浏览 96提问于2024-01-11
我是python的新手，我得到了一个错误，我不能解决它:pics = r.json()['data'['photo_list']请帮助解决这个问题，非常感谢！if __name__=='__main__':Traceback (most recent call last):
File "F:/python/User/爬取新浪微博.py", line 28, in <module&g
浏览 20提问于2017-08-20得票数 0
使用selenium爬取WOS数据，首先对下拉条进行点击模拟，会弹出一个新的选择框，同时页面的结构也是新生成的。TIM图片20180717152821.png
浏览 132提问于2018-07-17
3回答
我目前正在着手一个项目，该项目将涉及爬取和处理大量数据(数百个数据集)，并对它们进行挖掘以提取结构化数据，命名实体识别，重复数据删除，分类等。我熟悉来自Java和Python世界的ML工具: Lingpipe、Mahout、NLTK等。然而，当涉及到为如此大规模的问题选择平台时-我缺乏足够的经验来决定是Java还是Python。我知道这听起来像是一个模糊的问题，但我正在寻找关于选择Java或Python的一般建议。JVM提供了更好的性能(？)在Python之上，但是像Lingpipe之类
浏览 6提问于2012-03-15得票数 34
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
对象存储
云直播活动推荐
腾讯云开发者
