我想使用BeautifulSoup从维基百科文章中抓取数据，以便创建人力资源图表。对于下面的示例，我选择了名为Arcturus的星星，尽管代码的目的是为了足够通用，以便工作(几乎？)任何一颗星。每颗星的维基百科页面最右边的表格包含了构建图表所需的所有信息。import requests# import numpy as
浏览 22提问于2019-08-07得票数 0
回答已采纳
2回答
我想构建一个Android应用程序，它可以用php抓取一个网站，并从我抓取的网站中的一个很小的span标签中获取信息。
我想知道这是不是合法的(我想这是因为Google一直在抓取网站)。
浏览 4提问于2012-01-03得票数 0
我在web dev是个新手，对于从维基百科上获取数据有个问题。我正在制作一个个人网络应用程序，将保持跟踪过去的UFC事件。我找不到有事件细节和结果的开源api。然而，维基百科上的以下表格有很多我需要的信息：和我已经看过几个教程，介绍如何从维基表格中获取信息，并使用谷歌电子表格或其他软件(如openrefine )将其格式化为.csv格式。但是，我也想要每个事件的wikipage的信
浏览 3提问于2015-01-14得票数 0
我正在尝试开发一个R脚本，它接受一个字符串，并将其提交到维基百科搜索框中。在到达该字符串所在的页面之后，R程序应该从该页面提取所有的表。例如，如果字符串是曼彻斯特联队，R脚本应该在维基百科上提交一个查询，该查询将它带到曼彻斯特联队页面，并提取所有表并将其转换为数据帧。附言:我刚刚开始在R中尝试web抓取，所以如果有任何帮助，我将不胜感激。
浏览 1提问于2014-09-04得票数 0
4回答
通过编辑这篇文章来更新问题，使其只关注一个问题。 5年前就关门了。 改进这个问题 我是一个Python开发人员，目前正在进行一个与NLP和NLTK相关的项目。在这个项目中，将需要大量的数据来进行事件分析。因此，我给出了两个问题 我在哪里寻找如此大量的数据。我的首选是维基百科，但我不知道如何访问它的数据？我需要抓取维基百科吗？我应该如何组织所有这些数据，以便获得更好的搜索结果？K-means聚类会有用吗？
浏览 74提问于2015-11-04得票数 -1
Mode=StudySummary&SortBy=Analysis&AscDesc=asc&ResultsPerPage=2000 通过每个链接，我必须像这样下载整个表：https://www.metabolomicsworkbench.orgSTUDY_ID=ST000886&SORTFIELD=moverz_quant 并在excel中将每个链接中的每个表放入单独的工作表中。 如果有人能告诉我如何自动化整个过程，我将不胜感激。
浏览 17提问于2020-10-03得票数 0
3回答
我有一个问题，那就是从网站获取信息到我的python项目中(当项目正在运行时)。我还没有写过任何代码，因为我是这种编程的初学者。我想问你，我需要哪些模块以及如何使用它们，如果你们中的一些人可以，我将感谢一些代码的例子。
浏览 1提问于2020-09-18得票数 0
我已经用PHP和cURL构建了一个简单的web抓取工具，并且一直在使用这样的代码来通过ID抓取抓取页面的某些元素，或者在所需元素上没有ID的情况下通过标记名抓取：$response = $dom->saveXML($table);
现在我遇到了一个两难境地，我需要更进一步，找到文本的某个字符串或正
浏览 1提问于2011-03-09得票数 0
回答已采纳
我试图从电子表格中的列中提取数据，但它将其提取为列表列表。例如，如果列表在电子表格的A列中包含以下名称。Anna作为变量中的字符串，而不是['Anna']？如果要使用代码将其粘贴回不同位置的工作表中，是否需要采用['Anna']格式？比如，如果我想移动或复制Anna到D4单元格。长期的目标是从一列中获取数据
浏览 5提问于2022-05-04得票数 1
1回答
我试图从维基百科中提取出生和死亡数据。我使用过DBpedia和维基数据，但在这个特殊的例子中，日期与维基百科不匹配。为什么会有这种差异？这个日期信息可以<em
浏览 2提问于2019-10-21得票数 2
回答已采纳
不幸的是，我一直使用的稀疏代码是在另一个网络上，但我包含了一个示例电子表格。我想得到建议的步骤在简单的英语(比我下面有更详细的)，所以我可以首先尝试自己在Python 3脚本。问题:一个健壮的电子表格中有几列非常没有结构，只有500-5000个英文字符来讲述一个故事。我需要从本质上通过提取可量化的数据来使其更具结构化。我需要： 1)在用户提供的非结构化自由文本列中搜索字符串(用户输入列标题)(我认为我这样做是对的) 2)在Excel中将该字符串
浏览 26提问于2019-01-11得票数 0
我有一个超过10.000个网站的列表，我想在所有这些网站中搜索一个关键字。
如果网站包含关键字，则预期的结果应该类似于链接和值为1的列，如果不包含关键字，则值为0。
浏览 1提问于2015-12-22得票数 0
我想从一个包含许多医生和医院名称的网站中提取数据，我想做一些评估，所以我决定使用搜索栏，但不幸的是，似乎无法得到我想要的结果！
我怎么能这么做？
浏览 3提问于2018-06-11得票数 2
回答已采纳
2回答
我正在创建一个从我的服务器上的文件中提取数据的应用程序。该文件根据通过URL传递的Get值从我的数据库中获取数据。我正在寻找任何可能对我有帮助的想法<
浏览 0提问于2010-03-26得票数 1
回答已采纳
有没有人知道如何使用get文本和数据，把它们拼凑起来并插入到Excel中？
我想在我的Excel中显示的是那些在蓝色高亮显示，我能够得到数据表使用数据抓取，但我不能得到“104445”在一起。
浏览 5提问于2020-09-01得票数 2
我正在收集3600多个维基百科网页上的统计数据以供工作。我试图用R中的网络抓取来实现自动化。# ID webpage link first
setwd("C:\\Users\\judit\\ScrapingPS:请原谅我的法语在代码中。这是我的第一语言。
浏览 2提问于2019-12-01得票数 2
回答已采纳
我在第1列中有一个组织列表(带空格的字符串，例如联合国)，并希望使用第1列的值作为搜索字符串，使用相关的URL(例如www.un.org/)填充第二列。地理编码过程相当简单()，所以我想知道是否有一种方法可以使用谷歌搜索或其他web服务来执行此任务。这将是一种碰碰撞撞的方法，但它胜过手动编辑。谢谢!
浏览 2提问于2017-03-01得票数 1
3回答
我的任务是创建一个网络抓取软件，我甚至不知道从哪里开始。任何帮助都将不胜感激，即使只是告诉我这些数据是如何组织的，或者网站使用的是什么“类型”的数据布局也会有所帮助，因为我可以用谷歌搜索那个词。基本上，我需要从这个网站提取“谐波值”。具体地说，我需要在第二个链接上显示9个数字。这些数字不会传递给HTML，它们似乎每隔几秒钟就会自动更新一次。我需要能够实时提取这些值，因为它们更新。即使这是不可能的，我仍然需要证明做这样
浏览 0提问于2013-10-26得票数 1
1回答
我正在尝试从维基百科的一篇文章中提取一个有组织的类别及其子类别列表。这篇文章是：它不需要被动态编码到我的站点中。我也愿意在电子表格(importxml、importhtml等语句)的帮助下手动提取数据。然而，我仍然没有找到一种优雅的方法来完成上面的文章(电子表格提取或通过API)。(通过查看源代码，您可以看到将表作为查询的importhtml在单个单元格中输入所有列表项，而将列表作
浏览 4提问于2014-12-03得票数 0
云服务器
ICP备案
云直播
对象存储
实时音视频
腾讯云开发者
