1回答
我使用的是请求-HTML和漂亮的抓取一个网站，下面是代码。奇怪的是，当我使用print(soup.get_text())时，我有时可以从web上获得文本，而当我使用print(soup)时，我会得到一些随机代码-在所附的图像中。
浏览 10提问于2020-08-14得票数 0
2回答
我正在尝试从有经验的人那里获取更多的信息，一般来说，我正在使用Python库进行web抓取。与此同时，我注意到一些人正在使用simple Bash，并使用wget, curl, sed, grep, awk等命令进行web抓取。与使用Python库进行web抓取相比，这些命令在脚本编写方面似乎要干净得多。
你对此有什么看法？您认为使用python库比使用Bash有什么优势吗？或者甚至使用Python
浏览 1提问于2017-03-03得票数 0
1回答
当我尝试获取频道标题时，我的网络刮板出现了问题。我不确定如何修复它，但是通过对通道函数进行一些测试，似乎视频链接可以与它一起工作，而只有通道链接应该与YoutubeChannel函数一起工作。
浏览 2提问于2016-05-03得票数 0
1回答
我需要一个帮助来填写以下网络抓取代码。对于soup.find_all(‘tbody’)1.find_all(‘tr’)中的行： IndexError:列表索引超出范围 你能帮我解决这个问题吗？
浏览 12提问于2021-08-03得票数 0
回答已采纳
我试图使用来制作一个web刮刀，但是我遇到了很多问题，因为它使用了Python2。可以在tarball中的所有文件上同时运行2to3命令吗？这会不会导致看不见的错误？我这么说是因为在表单上似乎没有太多关于运行scrapy版本0.24所固有问题的活动，也就是说，它是用python 2编写的。如果scrapy是最好的选择，而移植是个坏主意，那么在我的面向python3的机器上运行它的最好方法是什么呢？只使用python 2或我可以在配置文件中更改之类的东西来运行它的命令。更
浏览 1提问于2015-02-08得票数 1
回答已采纳
我想从以下位置抓取文本“现货” *<p class="instock availability"> In stock
<
浏览 10提问于2020-04-15得票数 0
回答已采纳
1回答
我是一名python新手，想知道是否有人能够用下面的webscraping脚本指出我哪里出了问题。我已经尝试添加注释来解释我的每个观点，感谢任何帮助。
浏览 40提问于2018-09-16得票数 2
1回答
从网络抓取开始
、、
我在看关于如何制作网络刮刀的视频，我有一些问题：
我看到了很多教程在python中进行web抓取，因为我非常了解python，所以我问自己，什么更适合web抓取？Python还是Java脚本，我应该使用哪一个？我可以将python程序与html连接起来吗？我需要使用网站抓取一个网站，我正在尝试做一些事情，从其他网站获取特定的数据，然后显示在我的网站上，这样人们就可以看到他们。你对如何开始有什么建议吗
浏览 1提问于2019-12-31得票数 0
回答已采纳
有人建议我使用WebKit (如Ghost.py )来抓取数据，但在浏览器中模拟打开的选项卡使连接保持打开状态。
浏览 1提问于2015-08-12得票数 1
回答已采纳
我正在学习使用Selenium的Python。在这个学习中，我试图打开Google Finance，并用数据抓取季度财务表。最终，我的目标是从表列中读取报价器，并从季度金融表中抓取数据。
浏览 27提问于2019-12-09得票数 0
1回答
我试图从下面的站点中提取整个表格，并将其存储为数据帧，但在尝试提取所有标题时遇到错误。该表似乎具有这些属性，因此不确定为什么会发生这种情况。 URL = "http://www.ercot.com/content/cdr/html/real_time_spp"soup = BeautifulSoup(page, "lxml")
tabl
浏览 12提问于2021-10-20得票数 0
1回答
因此，由于某种原因，当我试图获得这个脚本的结果时，它只是崩溃，并且在我得到任何东西之前没有显示错误，请有人帮助我让它工作。我不知道这是为什么，我认为这可能与获得某些方面的项目变量有关，但我就是搞不懂！任何帮助都将不胜感激。from bs4 import BeautifulSoupimport re
print("\nThis Program Will
浏览 2提问于2022-03-09得票数 0
回答已采纳
1回答
我目前正在编写一个web抓取器，它为我的Python Flask服务器提供数据。我的目标是向服务器发送POST请求并检索JSON。当我用相同的代码在MacOS上运行它时，它返回一个空白响应，因为cookie不匹配(你可以用相同的代码尝试它)；如果我随后在Mac上访问该网站，通过正常的方式手动获取发送请求的cookie字符串，并将其替换为Python
浏览 13提问于2020-09-14得票数 0
回答已采纳
我刮过以下网站:使用Selenium的。我正在搜集所有的表格数据。它运行得很好，但是运行脚本需要相当长的时间。因此，我开始搜索替代方案，并在StackOverflow上使用API向服务器发送请求，但经过几个小时的尝试和搜索(例如，我放弃了)，因为我没有得到一些东西：
import json
data
浏览 4提问于2017-11-25得票数 1
1回答
我想下载一个文件，其中没有使用机械的网址。我尝试了.read()，但它给我的是html文件，这是显而易见的。这是我需要发送to> file>访问列表并单击create http://www.ncbi.nlm.nih.gov/sra?term=SRP000714的url文件。
浏览 2提问于2014-09-11得票数 2
1回答
当我打开要从中抓取信息的url时，HTML代码显示了所有内容。但是当我在网页上抓取它的HTML代码时，它只显示了其中的一部分，而且它甚至不匹配。现在，当网站在我的浏览器上打开时，它确实有一个加载屏幕，但我不确定这就是问题所在。也许他们阻止人们刮掉它？HTML我返回： <!
浏览 7提问于2020-10-25得票数 0
回答已采纳
云服务器
ICP备案
云直播
腾讯会议
实时音视频
腾讯云开发者
