requests.get不返回类似于浏览器的devtools的html

文章/答案/技术大牛

发布

2回答

web-scraping、beautifulsoup、python-requests

我正在使用漂亮的汤，并请求抓取一个网站，但我没有得到适当的html。这就是我所得到的(从head中删除了一些链接标签)： <!DOCTYPE html> <head> <title> .... title was而在chrome devtoo

浏览 48提问于2020-10-11得票数 1

回答已采纳

3回答

Python请求:从web响应访问json数据

python、json、parsing、request、response

我有一个问题，可能有一个众所周知的答案。然而，我无法很好地表达它，无法在谷歌上找到答案。假设您正在使用Chrome (按F12)的开发人员界面。

浏览 6提问于2022-02-07得票数 1

3回答

自动化开发工具？

uiautomation

在使用自动化时，我需要记录服务调用的预览部分数据。如果是的话，我如何做到这一点？📷

浏览 0提问于2020-04-14得票数 5

1回答

如何修复VSCode中的dart：？

dart、visual-studio-code、dart-html

我尝试在VSCode中使用导入' dart :html'；子句来运行一个简单的dart程序。在运行模式下(我使用VSCode扩展“CodeRunner0.9.9”)和调试中出现了相同的错误：导入‘飞镖:html’； --- 在"pub get“命令之后，我将看到html的存在，但错误仍然存在。*)我的下一步是通过"packa

浏览 0提问于2019-05-30得票数 1

1回答

如何获得初始网页后加载的网页元素？

python、html、python-3.x、xpath、web-scraping

我正在尝试从雅虎金融()下载股票期权数据，而requests.get似乎并没有下载所有的东西。我试着用XPath来减少日期，但是即使Chrome DevTools说有13个实例，即使//option也不返回任何东西！我希望这与一个事实有关，即站点中真正重要的部分是在所有导航栏之后加载的，而我不知道如何获得全部内容。请您建议一种方法来获取日期下拉菜单中每一项的文本？

浏览 3提问于2016-10-07得票数 0

1回答

我有一个电子应用程序，有多个devtools窗口。所有devtools窗口都有相同的标题“Devtools”，因此我希望能够将标题设置为类似于“Devtools(弹出)”的内容，这样就可以更容易地区分它们。使用title属性创建devtools浏览器窗口，或者使用devtools.title = 'Custom devtools title'或window.setTitle(&#

浏览 9提问于2022-08-28得票数 0

2回答

如何在不使用浏览器的情况下获取表单数据？

python、web-services、autologin

我对python很陌生，我认为最好的学习方法是通过实践，这是我的第一个项目。我已经设法提交了团队的部分。user_draft_id = UDID, sign = SIGN)这段代码运行得很好，但问题是，“符号”对于每个游戏来说都是唯一的，我不知道如何在不使用Chromes检查选项的

浏览 4提问于2015-12-28得票数 1

回答已采纳

1回答

如何在python网页上抓取嵌入脚本

python、html、xpath、web-scraping、html-parsing

page = requests.get(url)feature_bullets = tree.xpath('//*[@id="iframeContent"]/div/text()')以上代码不返回任何内容。原因是浏览器解释的xpath与源代码不同。但我不知道如何从源代码中获取xpath。

浏览 1提问于2014-10-31得票数 3

回答已采纳

2回答

用美汤抓取Flipkart网页

python、beautifulsoup

我正在尝试抓取Flipkart上的这个页面： page = requ

浏览 0提问于2016-01-12得票数 1

1回答

为什么当我查看twitter用户查看源html时，我没有看到他所有的tweet都是html。

python、html、google-chrome、beautifulsoup、twitter

为什么当我查看twitter页面的html源时，我没有看到他的推文，我怎么才能使用BeautifulSoup呢？例如，当我查找https://twitter.com/twitter的html源时，我没有看到<img alt="Zdjęcie" draggable="true" src="https://pbs.twimg.comformat=jpg&name=large" class=&quo

浏览 6提问于2022-08-06得票数 -2

2回答

Web抓取返回空列表

web-scraping

但是，下面的代码返回空列表。有什么想法吗？import BeautifulSoup as soup uClient = uReq(my_url)uClient.close() for link in page_soup.find_all

浏览 1提问于2020-04-16得票数 0

回答已采纳

1回答

当使用Python进行web抓取时，如何通过浏览器中的Javascript被禁用错误

javascript、python、web-scraping、beautifulsoup、python-requests

我正在尝试创建一个脚本下载到pdf的电子书。当我尝试在其中使用JavaScript来打印单个页面的内容时，我在控制台中收到一条消息：“哦，不！看起来您的浏览器中禁用了漂亮汤。我的代码供参考： url = requests.get("https://platform.virdocs.com/r/s/0/doc/350551/sp/14552484/mi/47443495&

浏览 61提问于2020-10-18得票数 0

3回答

如何使用Python显示网页？

python、html、webpage、pexpect、html-parsing

我想读取用户在Python语言中的输入，以获得一个url (例如)，然后将网页以HTML格式(仅文本)打印到终端。我还查看了HTMLParser模块，但我不知道如何将生成的文本格式化为类似网页的内容。有什么建议吗？

浏览 2提问于2011-12-05得票数 1

回答已采纳

1回答

如何在flutter应用中查看执行时间？

flutter、dart、flutter-image

我已经创建了与API集成的基本flutter应用程序。现在很少有API调用提供即时响应，也有很少的调用非常慢。我需要找出哪些呼叫使我的响应较慢。

浏览 6提问于2020-10-31得票数 0

2回答

使用python计算特定单词在网页上出现的频率。

python、web-scraping

我试过这样做：c.count('Programmierung')a=requests.get('https://www.uniberg.com/index.html').text.count('Mitarbeiter') 但它也会

浏览 3提问于2018-06-26得票数 0

回答已采纳

1回答

用Xpath抓取python中的问题

python、html、xpath

我想把在这个上犯下的所有罪行都搜刮干净。我想刮的每一页都是"“+邮政编码的格式。但是，无论是通过python还是在chrome上查看源代码，我都不会得到任何列出逮捕信息的数据。我得到了一个通用的网页，上面有每一种犯罪的图片和犯罪的标签。例如，消息来源会说(通过查看源代码可以看到这一点)：li，<...我尝试过使用一个漂亮的汤，我的代码基本上是：from bs4 import BeautifulS

浏览 2提问于2017-01-30得票数 1

回答已采纳

2回答

将varibable设置为saved值总是正确的

javascript、checkbox、electron、boolean

在这段代码中，我试图从localStorage读取一个布尔值，并将其写入HTML-checkbox的checked属性：devtools = document.getElementById('dev-tools-checkbox('devtools'); 奇怪的是，无论控制台将记录值显示为什么，复选框始终设置为true。在像这样的devtools.checked = !localStorage.getItem('devto

浏览 14提问于2020-06-01得票数 0

回答已采纳

2回答

使用Selenium实现基于铬嵌入式框架的桌面应用程序自动化

automated-testing、selenium-webdriver

背景：在桌面应用程序的许多屏幕上，用户在ch

浏览 0提问于2019-11-25得票数 1

1回答

如何在正常的chrome扩展中调用chrome.devtools.* api调用而无需在浏览器中打开devtools

javascript、google-chrome、google-chrome-extension、google-chrome-devtools

我正在尝试构建一个常规的chrome浏览器扩展(，而不是，一个开发工具扩展)，当在特定页面上激活它时，它会获得请求资源的所有IP的列表。但是，您只能从devtools页面中调用chrome.devtools.*，它只存在于浏览器中打开的devtools窗口的生存期内。我不想仅仅为了在devtools.js中调用这个函数而打开devtools。有没有办法调用chrome.de

浏览 6提问于2016-08-03得票数 2

1回答

如何取消生成页面的301重定向

nuxt.js、single-page-application

nuxt.config.js：然后：在浏览器中输入localhost:3000/alias在DevTools>Network我得到了：localhost:3000/alias/ 200 如何摆脱301重定向加载直url而不尾随斜线。提示：页面绝对是静态的。所有脚本文件都在生成阶段

浏览 1提问于2021-07-20得票数 1

回答已采纳

点击加载更多