腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(2531)
视频
沙龙
2
回答
使用
Python
自动化创建例程的最佳方法
python
、
browser
它应该做的是浏览几个网站,点击一些按钮,抓取所需的信息,存储收集的信息,并
填写
一些表格。使用
Python
可以做到这一点吗?如果是,那么最紧凑的方法是什么?
浏览 1
提问于2013-05-07
得票数 0
1
回答
Python
、
Scrapy
、
Selenium
-
填写
表单
python
、
selenium
、
scrapy
来源: from
selenium
import webdriverimport
scrapy
from
selenium
.webdriver.common.desired_capabilities import DesiredCapabilities#https://github.com/mozilla&
浏览 5
提问于2019-06-01
得票数 2
1
回答
如何从数千个经过身份验证的urls中抓取相同的数据?
web-scraping
、
scrapy
网页将SSO身份验证作为浏览器提示我正在考虑使用
scrapy
库,但之前没有使用
scrapy
的经验,这可能是一个遥不可及的目标。我可以使用
selenium
和webdriver来做到这一点,但这花费的时间太长了
浏览 9
提问于2020-05-15
得票数 0
2
回答
从网站中抓取、点击和分析数据需要哪些工具?
html
、
python-2.7
、
selenium
、
scrapy
虽然我的过程是使用
scrapy
获取数据,但我不确定如何导航页面并提供输入(例如登录凭据和按钮导航),这使我想要使用
selenium
(在工作中使用它,所以我对它相当满意),但我不确定这是否是最好的方法。
浏览 9
提问于2015-11-11
得票数 1
回答已采纳
1
回答
自动
填写
来自不同网站的
表单
javascript
、
php
、
forms
、
autofill
有没有办法从我们的服务器上的脚本到他们的服务器上的脚本自动
填写
这个
表单
? 我在谷歌上搜索这个主题,但我遇到了从同一页
填写
表单
的脚本,而不是不同服务器上的不同页面。
浏览 2
提问于2013-11-13
得票数 0
3
回答
我可以用
Scrapy
填充web
表单
吗?
python
、
web-scraping
、
scrapy
、
form-submit
现在,我使用iMacros从web中提取数据,并
填写
提交数据的
表单
。我在上搜索了一下,但是没有找到任何关于
表单
提交的东西。
浏览 3
提问于2014-02-21
得票数 9
回答已采纳
2
回答
Python
+
Selenium
:
填写
表单
python
、
parsing
、
selenium
如何
填写
此
表单
?输入“消息类型”。
浏览 1
提问于2017-01-29
得票数 1
4
回答
使用
Scrapy
进行
Python
数据抓取
python
、
python-2.7
、
web-scraping
、
scrapy
我的要求是
填写
文本字段并提交
表单
以获得结果,然后从结果页面中抓取数据点。 我想知道
Scrapy
是否有这个功能,或者是否有人可以推荐一个
Python
库来完成这个任务?附注:我正在使用
selenium
Firefox驱动程序从其他网站抓取数据,但这个解决方案并不好,因为
selenium
Firefox驱动程序依赖于Firefox的EXE,即在运行刮板之前必须安装Firefox此外,我需要无窗口抓取,这是不可能的情况下
Selenium
Firefox驱动程序。我的最终目标是在
浏览 1
提问于2013-05-28
得票数 8
回答已采纳
1
回答
使用
Selenium
Scrapy
时拒绝连接
python
、
selenium
、
scrapy
我正在尝试使用
Scrapy
和
Selenium
一起抓取动态生成的javascript内容()的页面。execute() File "/usr/local/lib/
python
2.7
浏览 3
提问于2013-11-23
得票数 1
回答已采纳
1
回答
使用SeleniumRequest时面临擦伤性硒问题
python
、
python-3.x
、
selenium
、
web-scraping
、
scrapy
我编写了一个非常小的脚本,可以使用
scrapy
和
selenium
结合使用库,从网页中解析不同餐馆的名称。我的settings.py文件包含:
SELENIUM
_DRIVER_EXECUTABLE_PATHfrom
scrapy
.crawler import CrawlerProcess from
scrapy
_
selenium
impo
浏览 0
提问于2019-05-21
得票数 0
回答已采纳
1
回答
动态呈现的
Scrapy
和
Selenium
提交
表单
python
、
selenium
、
web-scraping
、
scrapy
我使用
selenium
首先加载通过ajax生成的
表单
。若要发送
表单
数据值,请执行以下操作。
表单
在用户提交之前进行了jquery验证,是否会使使用
scrapy
提交变得更加困难?谢谢
浏览 1
提问于2014-07-21
得票数 1
回答已采纳
2
回答
如何通过
python
填充文本并选择选项(select tag)和点击提交(input tag)?
python
、
form-submit
我使用
python
并对一些内容进行数据挖掘,我将这些内容分类为不同的类别。有没有一种方法可以自动化这个过程?我猜这是一个“
表单
-提交”线程,但我还没有在
Python
中看到任何相关的模块。你能给我推荐点什么吗?
浏览 1
提问于2018-05-30
得票数 0
1
回答
提交用
Scrapy
动态呈现的
表单
?
python
、
selenium
、
selenium-webdriver
、
scrapy
、
scrapy-spider
我正在尝试使用
Scrapy
提交一个动态生成的用户登录
表单
,然后解析对应于成功登录的页面上的HTML。 我想知道我怎么能用
Scrapy
或者
Scrapy
和
Selenium
的组合来做到这一点。
Selenium
使在DOM上找到元素成为可能,但我想知道在获得完整的HTML之后是否可以“将控制权还给
Scrapy
”,以便使它能够执行
表单
提交并保存必要的cookie、会话数据等,以便抓取页面。基本上,我认为
Selenium
是必要的唯一原因是,在<em
浏览 2
提问于2015-03-21
得票数 1
回答已采纳
1
回答
Heroku色度驱动程序和google-chrome构建包在使用时会崩溃。
python
、
python-3.x
、
selenium
、
heroku
、
scrapy
g.send(result) File "/app/.heroku/
python
/lib/
python
3.7/site-pack
浏览 0
提问于2021-03-03
得票数 0
回答已采纳
2
回答
使用
scrapy
身份验证递归抓取网页
python
、
forms-authentication
、
web-crawler
、
scrapy
我的登录
表单
是post
表单
,输出如下-2014-02-28 21:16:53+0000抓取调试:远程登录控制台侦听0.0.0.0:60232014-02-28 21下面是我的代码:from
浏览 1
提问于2014-03-01
得票数 0
2
回答
Selenium
-来自当前Chrome实例的使用会话
python
、
selenium
我正在尝试自动化一些web应用程序的
表单
填写
。用户必须登录到应用程序,然后开始
填写
表单
页面。我有以下使用
Selenium
的
Python
脚本,可以打开我的应用程序的窗口:driver.add_cookie()
浏览 0
提问于2018-05-16
得票数 0
1
回答
如何
填写
Selenium
中xpath类型检测到的所有文本字段?
python
、
forms
、
selenium
、
webdriver
、
textfield
我希望使用
selenium
自动完成
表单
填充过程。注意:我正在使用
python
编写代码。
浏览 7
提问于2022-02-15
得票数 0
1
回答
当用户通过输入/提交点击与屏幕交互时,
Selenium
python
不起作用
python-3.x
我在
python
代码中使用
selenium
绑定。我正在捕获来自用户的登录详细信息,
selenium
将继续处理进一步的屏幕。但是,如果用户输入任何enter键并手动单击submit,
selenium
将关闭驱动程序并返回错误。 是否有任何方法可以基于
python
中的用户交互来处理
selenium
。例如,假设有一个注册屏幕,
selenium
将
填写
注册并等待用户验证数据并提交/按enter由用户提交。 对于使用
python
填充的<e
浏览 21
提问于2021-01-08
得票数 0
回答已采纳
1
回答
使用
python
抓取网页
python
、
python-3.x
、
selenium-webdriver
、
scrapy
# -*- coding: utf-8 -*-from
scrapy
import cmdlineimport pandas as pdfrom
selenium
import webdriverfrom
selenium
.webdriver.common.keysimport Keys from
selenium
.webdri
浏览 30
提问于2020-03-29
得票数 0
3
回答
无法在
Selenium
IDE上单击提交按钮
selenium
、
selenium-ide
在打开
Selenium
并
填写
表单
后,我无法让
selenium
IDE在我的一个one
表单
上单击Submit按钮。clickAndWait</td> <td></td> 有趣的是,如果我编写了一个脚本,只需打开
表单
并单击submit按钮,而不
填写
它,我就不会有任何问
浏览 3
提问于2012-04-23
得票数 1
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
爬虫入门基础探索Scrapy框架之Selenium反爬
重新入门python爬虫到放弃
爬虫神器-MechanicalSoup
如何利用selenium使用代理IP?
怎样开始用selenium进行自动化测试?
热门
标签
更多标签
活动推荐
运营活动
广告
关闭
领券