如何使用Python和Beautifulsoup从脚本标记中获取JavaScript变量

文章/答案/技术大牛

发布

2回答

python、selenium、web-scraping、beautifulsoup

我想用漂亮汤和python从变量meta返回"id“值。这有可能吗？此外，我不知道如何找到包含元变量的特定“script”标记，因为它没有唯一标识符，以及站点上的许多其他“script”标记。我也在使用selenium，所以我可以理解任何答案。

浏览 34提问于2018-08-10得票数 1

回答已采纳

1回答

使用python解析javascript标记中的变量数据

python、html、json、beautifulsoup、python-requests

我正在抓取一些网站使用BeautifulSoup和请求。我正在检查的一个页面将其数据放在<script language="JavaScript" type="text/javascript">标记中。它看起来是这样的： <script language="JavaScript" type="text/javascript&qu

浏览 2提问于2012-11-09得票数 13

回答已采纳

2回答

Python抓取

python、python-3.x、web-scraping、beautifulsoup、web-crawler

嗨，我对python和web都很陌生，下面是我从网站获取URL的脚本，但是我被夹在中间，我无法从类标记中获得URL，如果我查看了这个网站，我可以看到，但是在我的脚本中，它显示为javascript，任何帮助，请提前感谢import urllib.requesturl = &quo

浏览 3提问于2017-09-20得票数 1

回答已采纳

2回答

解析HTML源代码中的JavaScript代码

python

如何使用Python解析HTML源中的JavaScript代码，例如，我想提取productList对象<html><div id="content-wrapper"

浏览 0提问于2014-11-25得票数 2

3回答

Python -如何从脚本中的变量中提取数据？

python、beautifulsoup

我是Python的新手，我尝试使用BeautifulSoup从脚本中定义的变量中提取一些数据。data = soup.find_all('script', type='text/javascript') var myvar = { pro

浏览 1提问于2018-12-09得票数 1

回答已采纳

3回答

使用BeautifulSoup获取属性值

python、python-2.7、beautifulsoup

我正在编写一个python脚本，它将在解析完后从网页中提取脚本位置。假设有两种情况：和我能够从第二个场景中<

浏览 4提问于2013-09-11得票数 10

回答已采纳

7回答

我正在尝试用BeautifulSoup解析一个html页面，但是看起来BeautifulSoup根本不喜欢这个html或者那个页面。当我运行下面的代码时，prettify()方法只返回页面的脚本块(见下文)。有人知道为什么会这样吗？---------------------------------"这是BeautifulSoup生成的输出。loose.dtd"> <meta http-equiv=&

浏览 1提问于2009-03-02得票数 5

回答已采纳

1回答

如何使用python* bs4提取javascript变量*

python、regex、web-scraping、beautifulsoup

<script type="text/javascript">var csrfMagicToken = "sid:bf8be784734837a64a47fcc30b9df99,162591180";varcsrfMagicName = "__csrf_magic";</script>通过使用上面的代码行，我能够提取我

浏览 3提问于2021-07-10得票数 0

1回答

Python合并来自BeautifulSoup站点两个数组的数组元素

python、arrays、beautifulsoup、request、re

我创建了一个从HTML网站获取数据的脚本。我用美汤的主要目的是实现网页抓取。我想从超文本标记语言网站中找到的JavaScript变量中获取数据。有两个数组，我想从两个数组中提取值并放入python数组中查看数据。不幸的是，该网站不能在线访问。Header header header header header values values values values values 为了得到HTML和<

浏览 12提问于2020-10-26得票数 1

回答已采纳

2回答

*将html保存为文本

python、html、javascript

'<pre><html>'+h.replace(/(\n|\r)+/g,'\n')+'</html></pre>';}void(disp(h)); 我将代码保存为firefox中的书签现在，我尝试使用python保存html文件。保存的文件和javascript显示源文件不一样。可能python代码没有

浏览 1提问于2012-01-12得票数 4

2回答

具有多页的javascript表上的Python BeautifulSoup

javascript、python、screen-scraping、beautifulsoup

我曾经有一个python脚本，可以使用Mechanize和BeautifulSoup正确地从下表中拉出数据。然而，这个网站最近将表格的编码改为javascript，我在使用它时遇到了麻烦，因为表格有多个页面。例如，在上面的链接中，我如何从表的第1页和第2页获取数据？FWIW，URL不会改变。

浏览 3提问于2012-01-18得票数 1

回答已采纳

1回答

如何在Python中使用Javascript对象文字

javascript、python、json、python-3.x、beautifulsoup

通过Beautifulsoup模块，我提取了一个HTML页面。从该页面中，我进一步提取了Javascript脚本标记。在script标记中，有一个我想使用的对象文字。price":[{"qty":1000,"value":"100$"}, {"qty":10000,"value":"1000$"}]

浏览 26提问于2018-06-06得票数 0

回答已采纳

3回答

使用Python中的BeautifulSoup获取HTML源中的JS值

python、beautifulsoup

我正在尝试使用JavaScript从BeautifulSoup源代码中获取BeautifulSoup变量值。script>var my = 'hello';var is = 'halo';</script> --我想要返回Python中va

浏览 9提问于2016-12-07得票数 4

回答已采纳

1回答

用Javascript元素抓取网页

python、python-3.x、web-scraping、beautifulsoup、python-requests

所以为了给我的网站做前言，我似乎使用了javascript代码(关于web开发之类的术语我不太确定)，并且我在不同的页面上尝试抓取不同的表格也取得了不同的成功。p=NovakDjokovic，我可以轻松地“检查元素”，然后转到Network，找到脚本的正确“名称”，然后找到获取我想要的表所需的请求URL。= requests.get(url) table = soup.find(&#x

浏览 28提问于2020-07-08得票数 0

回答已采纳

2回答

如何使用Python从由Javascript填充的网站获取数据？

javascript、python、html、web-scraping、beautifulsoup

我想从网站获取一些数据/值。为此，我使用了beautifulsoup，当我尝试从Python脚本中获取它们时，字段是空白的，而当我检查网页的元素时，我可以清楚地看到表行数据中的值是可用的。我想出了一个原因，网站使用Javascript从自己的数据库中填充相应字段中的值。如果是这样，那么我如何使用<em

浏览 1提问于2015-02-27得票数 0

1回答

更新html文件中的数组

python、html、beautifulsoup

在我用Python运行的脚本中，我想要打开一个本地html文件，该文件在我想要更新的script标记中包含一个javascript数组。这是一个测试代码： from bs4 import BeautifulSoup <script> {'name':'Michaelname':'Erik',

浏览 10提问于2020-07-23得票数 0

回答已采纳

1回答

使用BeautifulSoup访问javascript变量

python、beautifulsoup

如何使用BeautifulSoup访问javascript变量？我知道变量的名称<script></script> 例如，在浏览器控制台中，我编写了window.variable_name我怎样才能在美汤中得到同样的东西呢？

浏览 2提问于2017-04-11得票数 2

回答已采纳

2回答

将garmin gps坐标转换为javascript变量

javascript、jython、openlayers、garmin、gpsd

我想删除一个标记并在openlayer (javascript)中创建一个新的标记。我可以做到这一点，但诀窍是，我想将新标记放置在garmin etrex gps接收器报告的当前经度/纬度位置。我可以使用gpsbabel从接收器获取新位置，并且我可以使用subprocess在python中执行此操作。我能想到的将这些数据放入javascript变量的唯一

浏览 6提问于2012-03-08得票数 0

1回答

在html body标记内添加内容

python、beautifulsoup

我在BeautifulSoup的帮助下创建了一个python脚本，我可以从网站上获取一些内容。我该怎么做呢？ thnx

浏览 4提问于2011-03-04得票数 1

回答已采纳

1回答

POST请求Python* Web抓取:从标签获取URL*

javascript、python-2.7、web-scraping、beautifulsoup、python-requests

嗨，我对python和web scraping都是新手。从我的脚本中，我想要POST请求，然后从中获取urls。但是我有一个问题，我不能从a标签中获取urls。当我检查网站时，我可以看到URL，但在我的脚本中，它显示为javascript。所以，我正在寻找一些想法来解决这个问题。谢谢。from bs4 import BeautifulSoup url = 'http:&

浏览 16提问于2021-07-06得票数 0

回答已采纳

点击加载更多