我写了一个亚马逊网络抓取代码，我的代码是工作良好的所有亚马逊产品，但它确实为一些特定的产品，我不知道，它显示的错误是UnboundLocalError的一些产品:本地变量‘评论’引用赋值前你能指导我怎么解决这个问题
浏览 5提问于2020-04-01得票数 0
2回答
我正在尝试从有经验的人那里获取更多的信息，一般来说，我正在使用Python库进行web抓取。与此同时，我注意到一些人正在使用simple Bash，并使用wget, curl, sed, grep, awk等命令进行web抓取。与使用Python库进行web抓取相比，这些命令在脚本编写方面似乎要干净得多。
你对此有什么看法？您认为使用py
浏览 1提问于2017-03-03得票数 0
我想知道有没有什么方法可以制作一个python脚本来从网站上获取一个所说的值，在我的例子中是一个离线数字，它在一个每5分钟刷新一次的网站上。我想要设置它，如果该值增加，它将发送给我一封电子邮件。我对python知之甚少，所以如果有人能给我指出正确的方向，我将不胜感激。。我正在尝试从html源代码的这一部分中获取离线编号.........I正在尝试使用我所需要的部分的Xpath，因为我知道我可能做错了。任何和所有的建议都将非常感谢。提醒一下，我真的是python的新手。
浏览 3提问于2020-10-01得票数 0
2回答
我想解析来自需要user/pass的站点的表行(当前名称为eg.test)，并将其存储在数据库表中。这可以在asp.net (或asp.net mvc4)中完成吗？谢谢，
浏览 0提问于2012-05-31得票数 1
2回答
我正在用Python编写一个脚本，它将从我的web服务器上抓取一些页面，并将它们放入一个文件中。我使用mechanize.Browser()模块来完成这个特定的任务。有没有一种方法可以相对轻松地使用多线程/多处理(即同时发出几个GET请求)？
浏览 0提问于2011-10-20得票数 2
我是python的初学者，我正在尝试使用mechanize模块来进行web抓取，但是出于某种原因，它总是告诉我我引用了局部变量'f‘，尽管我没有这样的变量。ReturnUrl=%2fhomeaccess%2f') 如果我使用完全相同的代码并将链接替换为'https://stackoverflow.com'，它可以工作，但使用我需要使用的链接，我会得到错误消息： Exception has occurred: <
浏览 25提问于2019-01-23得票数 0
1回答
我做了什么：-我正在使用web活动和复制活动，以加载URL数据使用POST方法到blob中。但我得到的输出是页面的完整HTTP响应。
浏览 21提问于2020-03-21得票数 0
我对网络抓取是新手，所以我在这里为亚马逊网络抓取写了一个代码，但是我在分页时遇到了一个错误，所以请你指导我如何修复这个错误。
浏览 4提问于2020-12-03得票数 0
1回答
从网络抓取开始
、、
首先，我想让您知道，我对html和css非常陌生，目前我还不知道如何使用Java脚本。我在看关于如何制作网络刮刀的视频，我有一些问题：
我看到了很多教程在python中进行web抓取，因为我非常了解python，所以我问自己，什么更适合web抓取？Python还是Java脚本，我应该使用哪一个？我可以将python程序与html连接起来吗？我需要使用网站抓取一个网站，我正在尝试做一
浏览 1提问于2019-12-31得票数 0
回答已采纳
我正在开发一个使用python和Django的网页抓取代码。我已经提供了所需的url，并且已经获取了数据。但是在url上有一个标签，上面写着“显示更多结果”。如何让我Django项目点击url上的“显示更多结果”选项卡并立即获取新的结果。 我已经使用Beautiful Soup库来进行web抓取/
浏览 16提问于2021-04-15得票数 0
10回答
我想从网站上获取每天的日出/日落时间。有没有可能用Python抓取web内容？使用了哪些模块？有没有可用的教程？
浏览 2提问于2010-01-18得票数 186
回答已采纳
我正在尝试用Google sheet和ImportHTML (以及它的变种，如ImportXML和ImportData)从网页上抓取股票行情。它可以在一些网页上工作，但不能在其他网页上工作。我使用了以下代码：=IMPORTHTML("https://www.barchart.com/stocks/performance/price-change/advances","table",0)。有没有办法下载或抓取这些数据？
浏览 9提问于2020-06-15得票数 0
2回答
我知道使用Python的Beautiful Soup抓取HTML的基础知识。但是，页面会进行AJAX调用，以获取球员上场时间的数据。(我使用firebug识别了网络调用)。我的问题是:有没有可能使用python来“抓取”这些信息？我需要什么工具，除了HTML我还应该知道什么？(我目前正在阅读有关JavaScript和AJAX的文章)。更新:几天后，我提出了一个在Python语言中结合使用Selenium和Phanto
浏览 0提问于2013-11-02得票数 0
2回答
我开发了一个web应用程序，它使用RangeNode.js/Express.js和MySQL开发。我的应用程序有一些页面，在从另一个web应用程序example: https://www.example.com获取数据后显示数据。由于另一个应用程序没有从哪里获取数据的API，所以在Python的帮助下，我使用了web 抓取，而则从站点中抓取数据。我用Node.js调用我的Pyth
浏览 4提问于2021-05-31得票数 1
回答已采纳
我使用C#和Python的Selenium Webdriver从网站获取数据元素，但web抓取的速度非常慢。抓取35000个数据表花了我大约1.5天的时间。使用Selenium Webdriver，我可以执行Javascript来获取Java元素。
浏览 5提问于2015-04-16得票数 13
我刮过以下网站:使用Selenium的。我正在搜集所有的表格数据。它运行得很好，但是运行脚本需要相当长的时间。因此，我开始搜索替代方案，并在StackOverflow上使用API向服务器发送请求，但经过几个小时的尝试和搜索(例如，我放弃了)，因为我没有得到一些东西：
如何逆向工程API发送正确的请求？我应该使用哪个网址链接？
浏览 4提问于2017-11-25得票数 1
1回答
我需要学习高级python编程技能才能使用python进行web抓取吗？或者，我应该看一些关于网络抓取的教程，同时学习使用python。我对python没有任何经验，因为我是Laravel开发人员，这是我第一次在web抓取中做这样的工作。
浏览 0提问于2019-11-04得票数 -1
我想知道是否有一种方法可以从HTML表中提取数据，并仅使用HTMLParser将其解析到字典中。由于某种原因，我不能做这件事..
浏览 1提问于2012-03-04得票数 0
云服务器
ICP备案
腾讯会议
云直播
对象存储
腾讯云开发者
