Python请求解析HTML以获取CSV

文章/答案/技术大牛

发布

1回答

python、html、csv、python-requests

所以我正在尝试做一个POST请求到一个网站，这个网站将显示一个CSV，然而，CSV不是唯一可以下载的形式，所以可以复制和粘贴。我正在尝试从POST请求中获取HTML，并获取CSV，将其导出为CSV文件，然后对其运行函数。我已经设法将其作为字符串转换为CSV格式，但似乎没有新的行。其次，如何将此字符串写入CSV文件？到目前为止我的代码如下：

浏览 16提问于2020-05-21得票数 0

回答已采纳

1回答

将.csv文件读入javascript中的对象/数组

javascript、jquery、csv、jquery-csv

我在脚本文件所在的目录中有一个.csv文件。我希望使用.csv文件中的数据创建一个对象或数组。如何使用javascript访问本地文件？

浏览 0提问于2015-11-01得票数 3

回答已采纳

1回答

JSP/Servlet:如何上载zip文件、解压缩它并提取CSV文件

java、mysql、servlets、csv、zip

想知道如何在JSP/Servlets中执行以下操作：注意: mySQL表已经设置，并为CSV文件输入做好准备。

浏览 1提问于2010-09-22得票数 2

回答已采纳

1回答

python美汤导入urls

python、python-3.x、web-scraping、beautifulsoup

import urllibimport csvcsvfilelist = csvfile.read()for

浏览 1提问于2016-03-01得票数 0

2回答

在名为" csv“的表的标题处有一个红色链接，如果您单击它，页面将以csv格式加载表信息。此链接的HTML代码为 <span tip="Get a widget to embed this table on your site" class="tooltip" onclick="sr_display_embed_trackEvent('Tool','Action','Embed'); } catch (err) {}

浏览 0提问于2013-11-24得票数 0

1回答

从python中的网站传输实时数据

python、ajax、web-scraping

我正在用Python编程。我想从网页中提取实时数据，而不需要刷新it：：。我认为实时数据网页是用AJAX编写的，但我不太确定。

浏览 4提问于2011-08-09得票数 2

1回答

Python:如何从网页中收集和解析csv数据？

python、csv、cgi、urllib

我有一个网页，打印出csv数据使用cgi脚本。我想使用Python解析数据。到目前为止，我知道我可以使用urllib来请求url并将html转换为一个巨大的字节字符串。但是，它包含的csv数据比我需要的要多得多，包括html标记、换行符等。我想要对这些数据做的是能够过滤行和列。这些数据最终将进入另一个csv文件，我可以使用该文件作为数据在图形中显示(highcharts)。我如何才能只解析csv的html<

浏览 0提问于2013-04-19得票数 0

回答已采纳

1回答

查询web服务器上的.txt文件

sql-server、tsql、sql-server-2012

维护着全美约1,400个气象站的近期天气数据。前一天的数据总是可以在以下地址找到：是否有允许直接导入不使用BULK语句的web托管文本文件的选项？我不想保存该文件，因为我计划自动执行此过程，并让它每天直接运行到服务器。

浏览 3提问于2016-05-23得票数 0

1回答

使用BeautifulSoup构建Spry框架的刮表

python、html、web-scraping、beautifulsoup、spry

我尝试过几种方法，但无法刮掉所有的行并将它们放入CSV文件中。有人能给我一些帮助/建议吗？谢谢!

浏览 3提问于2018-08-28得票数 0

回答已采纳

1回答

从`<a href=提取内容:text/csv；. content“>

python、web-scraping、python-requests、lxml、data-uri

有一个带有CSV内容的html标记<a>的字符串值：有没有一种方法可以通过标准模块(请求、lxml、纯python)获得这个CSV内容，而不需要这样的元头data:text/csv;charset=UTF-8？我不希望使用手动文本解析(通过regexp、index/start

浏览 4提问于2019-10-29得票数 1

1回答

如何从安装的dnf列表中获得可解析输出？

dnf

dnf list installed输出是人类可读的，但对机器解析器不太友好。是否有命令允许我们以json或csv或其他解析器友好格式获取已安装的包？dnf有python绑定提供更好的接口吗？

浏览 0提问于2021-09-24得票数 0

回答已采纳

1回答

在读取csv文件时遇到问题

python、csv、python-requests

我是Python新手，而且我对这些库没有太多的经验。我正在尝试使用货币转换程序的“请求”模块从'www.bankofcanada.com‘获取一个CSV文件，我想读取该文件，并解析它，以便在字典中使用该文件以获得货币及其比率。这两个部分各自工作得很好(我可以得到CSV文件并保存它，当已经有一个文件时我可以解析CSV文件).My问题是它们不一起工作，给出了空的结果：(import cs

浏览 0提问于2016-03-14得票数 0

回答已采纳

1回答

在网站上运行搜索并返回结果的脚本

python、r、search

我有一个大量的致病因素列表，我想对医学文献进行批量搜索，并返回从每种类型的bug中获得的结果，然后将这些结果放入一个很好的CSV文件中，这样我就可以将它们读取到R中，并处理一些统计数据/频率分布等。基本上，我需要一些方法来与托管我要搜索的数据库的对话，然后输入一个格式正确的字符串，以准确地执行我想要的搜索。然后让OvidSP为我运行搜索，并返回搜索到的匹配数。我有一些Java，C++的经验，并且开始学习R--我也想知道Python是否有用？这是我希望实现的目标的快速说明我想要搜索的bug(通过CSV文件输入到程

浏览 1提问于2012-06-21得票数 2

2回答

我应该使用什么语言来编写网页，以便从各种类型的数据库中自动更新？

javascript、asp.net、sql

我目前正在用HTML和Javascript的组合来编写它，以实现功能，但要确保数据在正确的位置变得非常困难。我想知道是否有一种可能的方法能够将Excel电子表格保存为某种格式(如CSV或XML)，然后编写一个程序(在HTML页面上)，自动在表格中显示所有信息？这有可能吗？

浏览 1提问于2010-10-26得票数 1

回答已采纳

1回答

如何使用python* selenium，使用csv文件中的URL列表不断地进行web抓取*

python、pandas、selenium、web-scraping、beautifulsoup

我需要知道如何使用csv文件进行网络抓取。我拥有的文件包含“公司名称”、“主页URL”、“地址”等列表。问题是：找不到连续刮擦的方法(为了-？)而-？)

浏览 2提问于2019-05-12得票数 0

1回答

调用API、解析JSON响应的Beanshell代码

jmeter、beanshell

我正在尝试实现一个逻辑，其中我不想发送HTTP请求，除非API为字段返回0。如果我发送的请求没有监控此接口的响应，则我的测试无效。API以JSON格式返回响应，我可以解析并提取需要比较的数据。Thread Group * CSV Data Set Config * JSON Path Extractor= “0” 我希望每隔5分钟调用一次此接口，并在字段值为0时继续发送HTTP请求。我不

浏览 4提问于2016-03-28得票数 0

1回答

Tomcat servlet，将所有urls重定向到单个网页。

javascript、tomcat、servlets、web-deployment

csvreports中的“index.html”从data/文件夹中选择csv文件并显示为html表。localhost:8080/csvreports/?csv=test.csv 我正在解析index.html中的url以获取csv文件名，并在代码中从/data/test.csv中读取。csv=test.c

浏览 2提问于2015-11-12得票数 1

2回答

使用selenium获取动态html表，并使用漂亮的汤解析它

python、regex、selenium、webdriver、beautifulsoup

我正在尝试获取网页中由JavaScript动态生成的HTML表的内容，并使用BeautifulSoup对其进行解析以使用表中的特定值。有没有其他方法来获取内容并使用它？它是包含任务列表的表，我需要解析该表并确定我正在搜索的特定任务是否可用。

浏览 0提问于2012-07-29得票数 1

2回答

BeautifulSoup没有用.find_all('a')刮掉页面中的所有锚标记。我是不是忽略了什么？

python、beautifulsoup、screen-scraping、python-3.3

作为参考，下面是我设置BS4对象并获取所需页面的函数： userSite = urllib3.PoolManager() bsd = BeautifulSoup(siteData.data)稍后，我将获取元素并将它们附加到我将操作的列表中在运行python3的命令行实例并导入"sys“之后，我输入并接收了： $ sys

浏览 1提问于2014-01-17得票数 3

1回答

Django上传和处理没有数据保留的文件

python、django、dropzone.js

Python: 2.7.11我想将csv文件上传到Django，并使用Python类进行分析。不允许保存，文件只需要到达要分析的类。HttpResponseRedirect('/upload/') file = FileUploadForm() return render(request, 'app/upload.html在csv_file中，请参见下面的handle_<em

浏览 2提问于2016-02-07得票数 3

回答已采纳

点击加载更多