腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
在
Python
中
使用
Selenium
抓取
Java
Heavy
网站
的
更新
python
、
selenium
、
selenium-webdriver
我
的
第一段代码看起来有点像这样, from
selenium
import webdriver driver.get("https://explorer.helium.com,但是这里
的
代码仍然返回为空。from
selenium
import webdriverfrom
selenium
.webdriver.s
浏览 7
提问于2021-10-18
得票数 0
1
回答
如何从javascript文件运行我
的
纯
python
(.py)文件
javascript
、
python
、
selenium-chromedriver
我正在创建一个
网站
,从一个
网站
抓取
数据,并在我
的
网站
上显示该数据。我
使用
selenium
进行
抓取
,这完全是用
python
编写
的
,它可以将
抓取
的
数据转换为JSON。我
使用
Javascript从JSON获取数据并将其显示
在
HTML
中
。 现在我想问两件事。 首先,如何通过虚拟主机
在
web浏览器
中
运行
浏览 147
提问于2021-01-03
得票数 0
2
回答
如何
使用
ajax元素
抓取
网页
ajax
、
web
、
scrape
我想
抓取
一些网页,如下所示 http://www.youtube.com/channel_ajax?action_load_more_feed_items=1&activity_view=1&paging=1352148528&channel_id=UCCw8aVnsIeu9S6OPQyaQ14g 我想
抓取
整个页面手动,我必须反复点击按钮,直到没有更多
的
加载,通过自动化,我如何
抓取
整个页面?谢谢!
浏览 1
提问于2013-01-10
得票数 0
1
回答
为什么我
的
网络
抓取
没有返回任何东西?
python
、
web-scraping
我对
python
上
的
web
抓取
是个新手。我有问题,当我运行我
的
代码,返回是白色空白,但它不是错误。我只是做了与课程相同
的
代码,但它对我不起作用 import urllib.request def __in url: news = "https://news.google.com/
浏览 22
提问于2020-08-21
得票数 0
1
回答
如何在
python
语言中
使用
selenium
和chromedriver
抓取
此页面?
screen-scraping
我正在尝试
使用
selenium
和chromedriver从
网站
“”
中
抓取
数据。当我运行代码时,chromedriver成功地输入了url,但无法加载页面,显示了一个空白页面。我尝试将目标
网站
切换到google.com,但
抓取
成功。我
的
结论是目标
网站
服务器检测到
selenium
并拒绝发送回数据。那么如何在
Python
语言中
使用
selenium
和chromedrive
浏览 0
提问于2020-05-29
得票数 0
1
回答
是否
使用
Python
通过Microsoft Live登录?
python
、
login
、
python-requests
我正在试着写一个程序,可以为战争机器4获取你
的
信息。我知道如何解析网页之类
的
,但我从来没有花时间通过
python
登录一个
网站
。现在,这带来了一个问题,因为我需要登录到我
的
Microsoft Live个人资料来获取我
的
统计数据。我试过我认为可行
的
方法,但每次都走进死胡同。这就是我目前所拥有的(这是有效
的
)import urllib2 username = 'USERNAME@hotmail.com'
浏览 10
提问于2017-03-13
得票数 1
1
回答
硒点击
的
视觉反馈
python
、
selenium
、
firefox
、
screen-scraping
我
使用
Selenium
(
Python
)和Firefox来
抓取
一个
网站
。
在
浏览
网站
时,我想看看它点击
的
地方。类似于单击后出现0.5秒
的
圆圈。 其他语言(
Java
)
的
答案也是受欢迎
的
。只要是硒。
浏览 1
提问于2018-10-30
得票数 1
回答已采纳
2
回答
Python
-如何在URL
中
不分页地刮分页
python-3.x
、
web-scraping
如何
使用
URL访问下一页,内容如下:我知道如何
使用
刮取库(BS4、
Selenium
),但我不知道如何
抓取
这样
的
站点。我一直
在
玩谷歌Chrome开发工具,但没有成功。我知道pubmed有API,但是API不返回我需要
的
信息(天气文章是否可以免费下载)。像
Python
这样
的
抓取
站点通常
的
工作流程是什么?
浏览 0
提问于2019-07-05
得票数 0
回答已采纳
1
回答
哪种语言有更多
的
硒WebDriver库和绑定?
Java
还是
Python
?
selenium-webdriver
、
selenium3
这个问题听起来可能是重复
的
。我搜索了Stack,发现了许多用户提出
的
问题,这些用户主要询问
Selenium
:
Java
还是
Python
应该选择哪种语言?但他们
的
问题主要与最终用户
的
易用性有关:比如哪种语言更容易学习。 我
的
问题是功能:哪种语言有更大
的
能力/更多
的
功能可以与
Selenium
WebDriver一起
使用
?
Java
还是
Python</
浏览 0
提问于2019-08-02
得票数 2
4
回答
Selenium
Webdriver
的
替代方案
javascript
、
selenium
、
webdriver
我
使用
C#和
Python
的
Selenium
Webdriver从
网站
获取数据元素,但web
抓取
的
速度非常慢。
抓取
35000个数据表花了我大约1.5天
的
时间。
使用
Selenium
Webdriver,我可以执行Javascript来获取
Java
元素。有没有一些库可以不需要像Webdriver这样
的
东西来在网页上执行Javascript来检索元素,并且能够点击元素?或
浏览 5
提问于2015-04-16
得票数 13
1
回答
使用
python
发布数据
python
、
post
我想用
python
发布一些数据到一个
网站
上。payload = { 'user-point-form-1': random_data #the data I want to post而我想要发布
的
html我应该如何更改请求,以便将数据发布到"XXXXXX“所在
的
位置?
浏览 2
提问于2017-09-04
得票数 0
3
回答
用于web
抓取
的
Selenium
与BeautifulSoup
javascript
、
python
、
selenium
、
beautifulsoup
我正在
使用
Python
从一个
网站
上
抓取
内容。首先,我
在
Python
上
使用
了BeautifulSoup和Mechanize,但我看到
网站
上有一个通过JavaScript创建内容
的
按钮,所以我决定
使用
Selenium
。既然我可以通过像driver.find_element_by_xpath这样
的
方法
使用
Selenium
查找元素并获取它们
的</
浏览 1
提问于2013-07-03
得票数 53
回答已采纳
2
回答
雅虎财经图表为图像文件
charts
、
yahoo-finance
不久前,雅虎财经改变了它
的
应用程序接口,从那时起,通过旧方法下载.csv数据就不再起作用了。这已经在其他几个问题中讨论过了。然而,旧版本也允许以.png文件
的
形式通过https://chart.finance.yahoo.com/z?s=<<TICKER>>下载某个符号
的
图表,现在也不再有效。新
的
图表查看器似乎只通过从JS脚本
在
画布上绘制来显示数据,而且似乎也没有“下载为图像”功能。那么,有没有办法
在
新
网站
上通过GE
浏览 0
提问于2017-06-20
得票数 4
1
回答
从网页捕获动态请求内容
python
、
web-scraping
、
httprequest
我正在尝试从网页
中
捕获动态内容。加载内容后,数据动态显示在网页上。
在
一个网页上,控制台中
的
响应是json格式
的
,第二个是html。我尝试过
使用
scrappy和urllib3,但是除了从网页本身获取静态数据之外,我没能捕捉到其他东西。 f.write(
浏览 1
提问于2020-05-25
得票数 1
4
回答
使用
Scrapy进行
Python
数据
抓取
python
、
python-2.7
、
web-scraping
、
scrapy
我想从一个
网站
上有TextFields,按钮等
抓取
数据。我
的
要求是填写文本字段并提交表单以获得结果,然后从结果页面
中
抓取
数据点。(编辑) 我
的
要求是从ComboBoxes中选择值并单击search按钮,然后从结果页面
中
抓取
数据点。附注:我正在
使用
selenium
Firefox驱动程序从其他
网站
抓取
数据,但这个解决
浏览 1
提问于2013-05-28
得票数 8
回答已采纳
1
回答
如何在无限滚动中加载所有条目(延迟加载)以解析
Java
中
的
HTML
java
、
html
、
web-crawler
、
jsoup
我有一个问题,当
使用
Jsoup
抓取
一个
网站
,
使用
延迟加载和Jsoup不能访问足够
的
内容,我需要。有没有办法解决这个问题?我正在
使用
selenium
和FirefoxDriver来获取,但这还不够 System.setProperty("webdriver.gecko.driver", "C:\\Users\\ADMIN\\
浏览 6
提问于2019-09-30
得票数 0
2
回答
使用
Bash脚本
在
python
库上进行web
抓取
?
python
、
bash
、
curl
、
sed
、
web-scraping
我正在尝试从有经验的人那里获取更多
的
信息,一般来说,我正在
使用
Python
库进行web
抓取
。与此同时,我注意到一些人正在
使用
simple Bash,并
使用
wget, curl, sed, grep, awk等命令进行web
抓取
。与
使用
Python
库进行web
抓取
相比,这些命令
在
脚本编写方面似乎要干净得多。 你对此有什么看法?您认为
使用
python
库比
使用<
浏览 1
提问于2017-03-03
得票数 0
2
回答
抓取
coronatracker.com
的
问题
python
、
web-scraping
、
beautifulsoup
我正试图
在
https://www.coronatracker.com/analytics
中
为一个项目搜集资料。然而,当我运行我
的
代码时,它只
抓取
了表
的
标题。下面是我
的
代码: from bs4 import BeautifulSoupimport csv csvrow[i] = csvro
浏览 11
提问于2020-06-07
得票数 0
1
回答
屏幕
抓取
-仍不工作
vb.net
、
visual-studio-2008
我想刮
的
html页面,有一些脚本运行,通常执行
的
脚本,以显示点击后
的
链接。一些人提到了firebug,另一些人则谈到了我需要
的
代码
的
逆向工程。a').removeClass('activeLink'); }我正在
使用
vb.net,一些
网站
很容易
使用
firebug,在那里,通过
浏览 3
提问于2010-03-13
得票数 1
1
回答
如何
使用
Python
从这个表
中
抓取
数据?
python
、
html
、
web-scraping
、
data-mining
我想用
Python
脚本将表
中
的
数据保存到Excel文件
中
,这也不是问题。然而,该
网站
的
源代码并不包含任何我想要
的
价值。如果我
使用
Chrome插件"DataMiner",它可以读出数值。我如何在
Python
中
实现这一点?
在
图片中,显示了我想要
抓取
的
数据。不幸
的
是,这些数据并没有包含在源代码
中
。from
浏览 6
提问于2021-12-03
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
《权力的游戏》最终季上线!谁是你最喜爱的演员?这里有一份Python教程
Python入门网络爬虫之精华版
Python 爬虫,登陆神器之Selenium简介
Java做爬虫也很牛
爬虫入门——详解Python是如何进行网页抓取!
热门
标签
更多标签
活动推荐
运营活动
广告
关闭
领券