腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9999+)
视频
沙龙
1
回答
使用
Python
web
抓取
检索
数据
时
出现
的
问题
、
、
我写了一个简单
的
代码来从网页中
抓取
数据
,但是我提到了所有的东西,比如带标签
的
对象类,但是我
的
程序不
抓取
数据
。还有一件事,有一个电子邮件,我也想刮掉,但不知道如何提到它
的
id或类。你能指导我吗--我该如何解决这个
问题
?谢谢!下面是我
的
代码: import requestsimport csv response
浏览 12
提问于2020-03-21
得票数 0
1
回答
使用
Python
抓取
Web
时
出现
的
问题
、
我想用
Python
抓取
网页,但我遇到了一些
问题
。下面是我
的
代码: from urllib import request pageURL="https://gamesnacks.com/embed
浏览 8
提问于2021-06-29
得票数 0
回答已采纳
1
回答
Ruby on Rails从另一个站点拉取信息
、
、
、
我有一个ruby on rails项目,在那里我必须制作一个新闻页面,但我不想只是将文章放在
数据
库中(这将花费太长时间),无论如何,您可以从另一个网站提取信息,并将其显示在您自己
的
网站上。
浏览 0
提问于2013-06-27
得票数 0
回答已采纳
1
回答
使用
Selenium和Java从网站中
抓取
数据
、
我试图刮
数据
从板球网站,并已经写了一个方法,接受一个球员
的
名字,并显示他们
的
相应
数据
。 如果您看到此方法,则取一个播放机名称并显示其所有
数据
。我
的
要求是显示所有球员
的
完整记分卡,而不是只显示一个球员
的
数据
。
浏览 0
提问于2020-03-04
得票数 0
2
回答
在
python
中
使用
Selenium进行
Web
抓取
-
检索
所有
数据
时
出现
问题
、
、
、
、
我正在尝试
使用
selenium在coinmarketcap.com上进行网络
抓取
,我正在尝试
检索
硬币名称、硬币市值、价格和发行量等
数据
。然而,我在这方面并不成功。此外,我还研究了如何
使用
不同
的
方法呈现javascrip (我认为coinmarketcap是用它制作
的
)
的
几种方法。下面是我
的
代码
的
开头: driver = webdriver.Chrome(r'C:\Users\Ejer\PycharmProj
浏览 0
提问于2020-12-14
得票数 0
2
回答
从产品上
抓取
价格
时
出现
的
python
web
抓取
问题
、
、
我尝试了与上面相同
的
方法,但遇到了一个错误,即index out out of range。我还试图预测价格,甚至是跨度,但都无济于事。
浏览 17
提问于2020-12-08
得票数 1
1
回答
使用
python
拆分
抓取
的
数据
时
出现
问题
、
、
我试图用BeauitfulSoup
抓取
一些页面上
的
数据
,但似乎无法获得我想要
的
数据
。我在拆分
数据
时
遇到了
问题
。我将在下面发布我
的
代码,但我试图做
的
是获取每个地址并将其拆分。例如,如果您尝试下面的代码,我可以获得我想要
的
数据
,但我似乎不知道如何将其拆分到 标签。我尝试
的
输出是,address = ['2 Warriston's Close
浏览 0
提问于2018-09-18
得票数 0
1
回答
从网络
抓取
开始
、
、
首先,我想让您知道,我对html和css非常陌生,目前我还不知道如何
使用
Java脚本。我在看关于如何制作网络刮刀
的
视频,我有一些
问题
: 我看到了很多教程在
python
中进行
web
抓取
,因为我非常了解
python
,所以我问自己,什么更适合
web
抓取
?
Python
还是Java脚本,我应该
使用
哪一个?我可以将
python
程序与html连接起来吗?我需要
使用
网站
抓
浏览 1
提问于2019-12-31
得票数 0
回答已采纳
1
回答
使用
Python
抓取
网站
数据
时
出现
的
性能
问题
、
、
、
、
我正试图从一个包含大约4000页
的
网站(每页包含25个链接)中删除
Python
的
数据
。提前感谢您
的
每一次帮助。:) 编辑:,我找到了解决方案,当你向下滚动
时
,你可以在我给出
的<
浏览 0
提问于2015-05-22
得票数 0
回答已采纳
1
回答
使用
"get“函数读取URL
时
出现
的
python
web
抓取
问题
、
我很难
使用
"get“函数读取excel文件"tennis3.xlsx”中从单元格A1获取
的
URL。我尝试过不同
的
解决方案,我不知道如何让它阅读并
使用
它来获得网页响应。
问题
可能始于‘sheet“”A1“..value’。编辑:我实际遇到
的
问题
是,我忘记了包含保存函数。
浏览 2
提问于2022-11-03
得票数 0
回答已采纳
3
回答
从Morningstar网站
抓取
财务
数据
、
、
我正在尝试从下面的morningstar网站上获取
数据
: import requests, os, bs4, string url = 'http://financials.morningstar.com/ratios/r.htmlsoup.find("div", {"class":"r_bodywrap
浏览 3
提问于2016-02-27
得票数 3
3
回答
用
python
刮网站
、
、
、
、
我已经看过多个教程和博客,最常见
的
库是漂亮汤和scrapy。如果有一种方法可以在不
使用
任何第三方库(如beautifulsoup和scrapy )
的
情况下
抓取
一个网站,那么就可以
使用
beautifulsoup。
浏览 1
提问于2020-06-09
得票数 1
回答已采纳
4
回答
Selenium Webdriver
的
替代方案
、
、
我
使用
C#和
Python
的
Selenium Webdriver从网站获取
数据
元素,但
web
抓取
的
速度非常慢。
抓取
35000个
数据
表花了我大约1.5天
的
时间。
使用
Selenium Webdriver,我可以执行Javascript来获取Java元素。有没有一些库可以不需要像Webdriver这样
的
东西来在网页上执行Javascript来
检索
元素,并且能够点击元素?或
浏览 5
提问于2015-04-16
得票数 13
2
回答
使用
Python
进行
Web
抓取
-获取属性值
时
出现
问题
、
、
我是Webscraping
的
新手,我正在努力从特定元素中获取两个属性
的
值 soup.findAll('div',attrs={"class":"RC-runnerPriceWrapper"})<div class="RC-runnerPriceWrapper PC-bestOddsContainerjs-runnerPrice
浏览 2
提问于2018-10-01
得票数 0
2
回答
如何从Django应用程序中
抓取
数据
、
作为练习,我想出了以下Django项目的想法:一个
web
应用程序,有一个按钮从Airbnb刮取房间
数据
,还有一个文本区域以排序
的
方式显示
检索
到
的
数据
。最好,为了
抓取
,我想
使用
Selenium,因为这个页面没有API。因此,按钮需要启动浏览器自动化。 因此,第一个
问题
是:是否有可能从一个
web
应用程序中启动selenium?我最初
的
想法是在单击按钮
时
启动
抓取
脚本,然
浏览 0
提问于2018-03-10
得票数 0
回答已采纳
1
回答
Azure
数据
工厂查询
、
、
案例:-有一个URL,我需要从下拉菜单中选择一个输入,从下拉列表中选择另一个输入来转换一些
数据
,再输入一个CSV格式
的
数据
,然后单击提交按钮,输出是以CSV格式生成
的
,所以我需要通过ADF自动执行此过程我做了什么:-我正在
使用
web
活动和复制活动,以加载URL
数据
使用
POST方法到blob中。但我得到
的
输出是页面的完整HTTP响应。然而,我已经创建了用于映射
的
参数,但是work.what不是只获得这些参数来选择URL
浏览 21
提问于2020-03-21
得票数 0
2
回答
使用
python
Web
抓取
时
遇到
问题
、
我是
python
和
web
scraping
的
新手。我编写了一些代码来从https://www.brainyquote.com/topics/inspirational-quotes中
抓取
引号和相应
的
作者姓名,但没有得到任何结果。这是我用于此目的
的
代码, from selenium import webdriver driver = webdriver.Chromeproduct.ap
浏览 10
提问于2021-02-02
得票数 1
1
回答
Spring @Transactional在延迟加载
时
不工作
、
、
、
、
我正在处理一个处理书店
的
小型maven (多模块)项目。用户有一组订单,这些订单是延迟加载
的
。:261)<!-- ============================= -->@Service @Transactio
浏览 7
提问于2014-11-23
得票数 0
1
回答
web
抓取
Python
时
的
编码
问题
、
、
、
、
我知道编码有一些
问题
,因为它是西里尔语。不知道该怎么解决。
抓取
网页是dfo_url = "https://opi.dfo.kz/p/ru/DfoObjects/objects/teaser-view/26730?
浏览 2
提问于2020-04-30
得票数 2
回答已采纳
1
回答
使用
代理
时
出现
Python
Flask
web
抓取
错误
、
、
我正在
使用
代理从Imgur获得照片url,Imgur在土耳其是被禁止
的
。我还是能拿到requests.exceptions.ConnectionError。我该怎么做呢?
浏览 0
提问于2019-10-15
得票数 0
点击加载更多
相关
资讯
MySQL分页时出现的数据重复问题
连接数据库时出现的乱码问题
数据库中查询不同性别人数时出现的问题
零基础入门Python爬虫,一文掌握爬虫核心原理!
使用Python进行网页抓取的介绍
热门
标签
更多标签
云服务器
ICP备案
云直播
实时音视频
即时通信 IM
活动推荐
运营活动
广告
关闭
领券