1回答
我正在寻找一种方法来抓取XML文件，并将其解析为CSV。XML文件将有相同的可选数据元素，但我将基本上每X分钟抓取这些XML文件解析出来，并输出到CSV的进一步处理，如导入到SQL等。大多数脚本语言(IIS)或可能使用C#是必要的，尽管我是C#新手，到目前为止还没有真正处理复杂的应用程序。
对于实现这类任务的语言和方法有什么想法吗？
浏览 2提问于2011-10-11得票数 0
回答已采纳
当我第一次连接到比赛时，我试图从比赛中抓取每个球员的名字。然后，我希望将这些名称传递给一个应用程序(我猜我将使用python?)这将连接到dotabuff和抓取每个玩家的前5个英雄的发挥，并输出他们。python是实现这一目标的最佳途径吗？对我可以使用的其他语言有什么建议吗？
我精通C、C++、Java和汇编语言，但对这一领域完全陌生。提前感谢您的帮助。
浏览 3提问于2016-03-03得票数 1
2回答
我正在做一个用JavaScript编写的小书签，用来从超文本标记语言页面抓取图片和视频。我很容易地抓取了所有的图像，比如，现在我想从Youtube，Vimeo，Dailymotion等不同的来源抓取网页中嵌入的所有视频，所以有人能给出一些关于如何用一些示例JavaScript代码来实现这一点的想法吗？
浏览 1提问于2013-07-19得票数 2
1回答
我正在尝试使用opencv的VideoCapture类从android抓取连续的帧。实际上我想在android上实现光流，为此我需要2帧。我首先用C语言实现了光流，其中我使用cvQueryFrame抓取了帧，一切都很正常。有谁可以帮助你抓取两张不同的图片吗？根据opencv文档，mRgba和mRgba2应该是不同的。
浏览 0提问于2011-11-08得票数 0
回答已采纳
13回答
我有一个特定的项目，我想在其中使用脚本语言+ C，或者作为替代方案使用100% Java解决方案。该程序进行“屏幕抓取”，并必须处理大量字符串。这部分代码是高度可变的。我公司的大多数开发人员都使用C语言，所以我最初的设计是用C语言</em
浏览 1提问于2009-12-09得票数 4
回答已采纳
例如，如果我可以访问ESPN的网站，查看联赛排名并将记录发送到我的代码，我想这是可能的。我知道有些网站有你可以使用的API，但我会使用它的网站没有…
浏览 1提问于2016-07-07得票数 0
3回答
此数据不是以任何标准格式(XML、RSS等)提供的并且必须从HTML中抓取。我需要抓取这些数据，并将其存储在数据库中以备将来参考。理想情况下，抓取例程将在循环的基础上运行，并且只将新记录存储在数据库中。对于我来说，应该有一种方法可以在这些网站上轻松地检测到旧记录中的新记录。
我最大的问题是:实现这一目标的最佳方法是什么？我还知道，一些编程语言也可以更容易地解析HTML数据。我是一个具有几种不同语言知识的开发人员，我想确保我选择了正确的语言和方法来开发它，这样它就很容易维
浏览 0提问于2012-09-04得票数 0
2回答
因此，假设我在一个网站上抓取多个页面(比方说1000)。我想知道哪种语言最适合用来抓取这些页面- javascript还是python。此外，我听说过javascript抓取器更快(由于多个get请求)，但我不确定如何实现这一点-有人能告诉我吗？
谢谢!
浏览 1提问于2012-03-04得票数 0
回答已采纳
我想要一个链接(并抓取它的HTML)，只保留重要的部分，文章说。有很多用于Objective-C - 的超文本标记语言解析库，但我想做的不仅仅是解析特定的东西，我需要一些东西来删除所有不属于可读内容的东西。在Objective-C/iOS中实现此目标的最佳方法是什么？
浏览 0提问于2013-03-23得票数 0
回答已采纳
1回答
我试图通过网页抓取一个超文本标记语言网页https://streamelements.com/logna/leaderboard，但我在火狐的inspect元素中看到的超文本标记语言代码与该网页的超文本标记语言源代码不同像这样的网页抓取是有可能的吗?或者有没有一种方法可以通过inspect元素来获取代码？
浏览 16提问于2020-05-02得票数 0
回答已采纳
1回答
C#
、
使用下面这样的代码
PerformanceCounter cpu_utilized = new PerformanceCounter("Processor", @"% Processor Time",
浏览 1提问于2016-05-04得票数 0
1回答
我正在尝试抓取一个网站，并根据我提取的数据编辑一个电子表格。我对抓取没有太多的经验，但我的方法是在html标签中找到独特的属性，并用它来抓取我想要的东西。所以对于这个网站，我的方法是首先抓取页面的URL列表，当你点击其中一个体验时，例如：，
其次，在这个列表中循环，每次都要抓取相关的属性。我使用iMacros进行抓取，但我现在对Java语言相当在行，所以如果需要的话，我会学习用Java语言进行抓取</em
浏览 2提问于2015-04-30得票数 2
1回答
我正在试着写一些基于网络的自动化。我访问的站点与我的自动化不在同一个域中，因此跨站点脚本问题使得无法访问目标网站上的DOM。我意识到我可以简单地写一个运行WebBrowser控件和我自己的脚本的Windows程序，但我不想让我的用户从我的网页上下载一个可执行文件，或者任何注册表覆盖来禁用跨域检查。它必须非常容易使用，没有额外的软件下载或任何东西。
我试图编写一个包含MS WebBrowser控件的ActiveX控件，这样我就可以有一个“浏览器中的浏览
浏览 0提问于2009-11-30得票数 0
2回答
相同的代码在其他位置运行良好，但是无论何时从amazon服务器运行，它都会得到403。使用postmancopying cookiescopying进行检查/不复制标头。无论我们做什么，在从amazon服务器运行代码/请求时，我们都会得到403。更有趣的是:浏览器工作正常(您可以从任何浏览器获得相同的链接，而不会出现任何错误)。请求不会从任何应用程序/任何语言中传递，包括邮递员，但是当使用任何浏览器时，它们都是正常的。所以这就像“某事”检测到请求的原始来源，如果请求来自amz "
浏览 11提问于2022-08-03得票数 0
2回答
可以在Python 框架中使用.NET框架从不同的站点抓取数据吗？我正在做我的最后一年的项目，在这个项目中，我想使用C#作为前端语言，并使用Python来抓取数据。
浏览 0提问于2014-05-07得票数 4
2回答
有没有一个好的，简单的库可以让C++加载网页？我只想抓取文本形式的源代码。我没有使用任何IDE或重要的库，只是直接使用命令行。谢谢你的帮助。
浏览 1提问于2010-05-08得票数 0
回答已采纳
我已经尝试过PuppeteerSharp和Selenium在登录后抓取网页，并重定向到页面并抓取HTML。
但我注意到有一个性能问题，CPU使用率增加了20-30%。除了使用C#登录并浏览另一个页面来抓取超文本标记语言之外，还有什么替代方法吗？
浏览 3提问于2021-03-28得票数 0
1回答
我想抓取网页和保存关键字的频率。例如，我想从URL：中抓取文科类别，并以其频率保存一个单词列表。所以我想要下面的输出电影400杂志120
实现这一目标的最简单方法是什么？任何语言中的任何工具或库都会非常有用。
浏览 1提问于2011-02-02得票数 0
8回答
我是一个入门的Java程序员，一直很难理解Java语言中的OOP实现的总体情况。我将尝试用下面的伪代码(如果不是很漂亮的话道歉)来构建我的问题： foo(); //stuff}
class我认为接口的目的是创建一个“方法抓取包”，它位于所有类混淆的范围之外，以避免不得不重构可以在一部分代码中修改的层次结构，并应用于许多实现类。换句话说，我设想一个接口就像'<em
浏览 6提问于2013-10-08得票数 4
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
