腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
我
在
抓取
多个
URL
时
遇到问题
、
、
我
在
抓取
多个
URL
时
遇到了问题。从本质上讲,
我
只能运行一个类型,但第二个
我
包括其他链接,它停止工作。 目标是获取数据并将其放入带有电影标题、
url
和流派的csv文件中。任何帮助都将不胜感激!from urllib.request import urlopen as uReq my_
url
= ['https://
浏览 11
提问于2020-12-04
得票数 0
2
回答
使用Addthis
在
Facebook上共享
URL
、
我们有一个新闻网站,使用AddThis插件
在
Facebook上分享新闻,有时当我们尝试
在
Facebook上分享新闻
时
,它不会检测到页面信息(标题,描述,图片),当我们把同样的网址放在Facebook调试器上
时
,一切都运行正常,页面信息被检测到,当我们返回网站并使用相同的网址
时
,我们可以正常分享它。
在
尝试Facebook调试器之后,
我
得到了这个错误: 分析
URL
时
出错:分析输入
URL
时
出错,未
浏览 0
提问于2013-09-01
得票数 0
1
回答
抓取
我
在
解析
时
抓取
的
URL
、
、
在
我
的爬虫中,
我
从一个excel文件中获得了startURL。例如,从这个
url
:
我
可以格式化此
Url
(
浏览 2
提问于2019-01-29
得票数 0
1
回答
在
本机视图中使用webview?
、
、
我
想知道是否有人为iOS创建了一个阅读器应用程序,允许用户
在
原生环境中查看网页,而不是在网页视图中?
我
正在尝试使用屏幕
抓取
方法,但在输入
url
以显示页面
时
遇到问题
。
浏览 4
提问于2012-12-01
得票数 0
回答已采纳
3
回答
我
有12000个已知的
URL
,用Python
抓取
它们最快的方法是什么?
、
、
因此,
我
有一个从数据库中提取的
URL
列表,
我
需要
抓取
和解析每个
URL
的JSON响应。一些
URL
返回null,而其他
URL
返回发送到csv文件的信息。
我
目前使用的是Scrapy,但它需要大约4个小时来
抓取
这12000个
URL
。
我
研究过像、和这样的东西,但我不确定它们是否适合
我
的用例,因为它们似乎是围绕着
抓取
网站上找到的
URL
。对于单机
抓取<
浏览 0
提问于2020-08-25
得票数 0
3
回答
亚马逊使用bs4阻止Python3的
抓取
,请求
、
、
、
几天前,当我运行该代码
时
,该代码运行得很好:import datetime csv.close() 由
浏览 4
提问于2020-03-12
得票数 2
回答已采纳
1
回答
在
添加了与第二个数据库的spring连接之后,
我
发现了一些错误。
、
、
、
、
我
更新了一些文件以建立与MySQ数据库的连接,之后程序就不会启动了。AbstractEntityManagerFactoryBean.java:409) ~[spring-orm-5.3.22.jar:5.3.22]
我
更新了
我
的用户实体user_id) REFERENCES market_db.user(id),
我
认为
在<
浏览 6
提问于2022-08-23
得票数 1
回答已采纳
2
回答
抓取
be365.com
时
未获取全部信息
、
、
、
、
我
在
尝试使用urllib.request和BeautifulSoup
抓取
https://www.bet365.com/
时
遇到问题
。问题是,下面的代码没有获得页面上的所有信息,例如球员的名字没有出现。
我
的代码是: from bs4 import BeautifulSoup
url
= "https://www.bet365.com/"
浏览 38
提问于2021-02-07
得票数 0
回答已采纳
1
回答
在
抓取
playstore评论
时
遇到问题
、
、
、
、
当我检查HTML元素
时
,要从play商店span tag获得类名为X43Kjb的评论。但是,
我
得到了一个空字符串。
url
= "https://play.google.com/store/apps/details?import requests response = requests.get(
url
浏览 1
提问于2021-07-19
得票数 0
1
回答
我
在用ImportXML
抓取
Span类
时
遇到问题
、
我
正在尝试
抓取
一个网站,而当尝试下面的importxml函数
时
,
我
得不到结果。请让
我
知道
我
错过了什么。
我
使用的函数如下: =IMPORTXML(https://www.bjs.com/product/keter-easy-grow-elevated-garden-bed/287699,"//span[@
浏览 0
提问于2019-04-17
得票数 0
2
回答
如何使用scrapy
抓取
instagram查询?
、
、
、
我
现在正在尝试
抓取
instagram帖子查询的纯文本(""),但只得到了403和301个回复。有人知道
我
如何绕过这些响应或
抓取
数据吗?
浏览 3
提问于2018-05-06
得票数 1
0
回答
NodeJS:
在
抓取
两个带有promises的
URL
时
遇到问题
、
我
正在
抓取
r/theonion并将标题写入文本文件onion.txt。之后,
我
打算
抓取
r/nottheonion并将标题写到文本文件nottheonion.txt中。
我
成功地写到了onion.txt,但没有写到nottheonion.txt。var onion_
url
= "https://www.reddit.com/r/theonion"; var not_onion_
url
= &qu
浏览 1
提问于2016-12-24
得票数 2
回答已采纳
1
回答
如何向
URL
中添加特定的参数(ad_id)?
、
、
在
我
的WordPress站点上,有一个页面http://www.example.com/doc/list/动态显示所有DB条目(76,000条)。
我
如何告诉谷歌,/44444/是使内容唯一的参数,即使名称是相同的?
我
阅读了Googl
浏览 0
提问于2013-08-07
得票数 0
1
回答
我
在
使用cocoapods验证
URL
时
遇到问题
、
、
我
很难创建一个可可pod模板并将其推送到GitHub,因为每次
我
使用以下命令访问根终端以验证pod: pod lib lint
我
得到了错误消息:
url
: There was a problem validating the
URL
https://github.com/Nathaniel Whittington/me.为什么
我
一直收到这个错误信息?brew cocoapods的最新版本是1.11.
浏览 10
提问于2021-09-04
得票数 0
2
回答
我
在
更改网站地址
url
时
遇到问题
。
我
最近改变了
我
的网站到可湿性粉剂,现在该网站只能在example.com访问,但www.example.com具有高页面权威和链接域。当我试图将站点地址
url
从example.com更改为www.example.com
时
,该站点将无法访问。这可能是什么原因呢?
我
能做些什么来找回
我
的旧网址?
浏览 0
提问于2012-10-15
得票数 1
1
回答
当
url
没有定义页码
时
,
我
如何
抓取
多个
页面?
、
、
我
想从网站的第二页获取html。
我
习惯了
url
显示页码,并允许
我
通过操纵它来
抓取
多个
页面。my_
url
= 'https://www.bodybuilding.com/exercises/finder/lookup/filter/muscle/id/1/muscle/chest' headers= {'referer':
浏览 10
提问于2017-06-27
得票数 0
回答已采纳
1
回答
使用R
在
多个
页面上进行Web
抓取
、
我
正在尝试使用R中的以下
url
来
抓取
产品的评论。当我运行下面的代码
时
,
我
能够获得单个评论被
抓取
。html_node(".content-item-text") %>% html_text()但是,当我使用下面的代码
抓取
多个
页面上的
多个
注释
时
review_page=2
浏览 10
提问于2017-06-27
得票数 0
2
回答
避免重复产品
抓取
的几点建议
、
、
、
我
已经写了一个非常基本的爬虫,从网站
抓取
产品信息放入数据库。然后,它可能会有另一个
URL
用于不同部分,如注释等:
我
的爬虫将其视为一个不同的
URL
。
我
找到了一些网站,其中一个产品有数百个不同的网址。
我
已经添加了忽略<e
浏览 1
提问于2011-09-20
得票数 1
回答已采纳
3
回答
httplib.BadStatusLine:'‘
、
、
像往常一样,
我
经常
遇到问题
,
我
彻底地寻找了当前问题的答案,但发现自己不知所措。以下是
我
搜索过的一些地方:- - -
我
遵循了
我
读到的
浏览 0
提问于2014-12-23
得票数 16
回答已采纳
1
回答
使用python从数据选项卡中
抓取
评论
、
、
我
在
抓取
多个
页面
时
遇到了麻烦。
我
认为
我
的错误
在
baseurl+str中的某个地方,但不确定如何继续前进。
我
感谢您的任何想法和建议。=baseURL+str(i+1) root = html.fromstring(page.content) reviews_all.extend(re
浏览 0
提问于2021-04-16
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
php机制本身不提供多线程的操作,有了swoole就不一样了
怪不得你的爬虫一页数据都抓不到,原来是忽视了这一点
移动网站如何优化才能获得好的关键词排名?
SEO实操方法之网站结构优化
策略-增加收录
热门
标签
更多标签
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
活动推荐
运营活动
广告
关闭
领券