我正在创建一个用于分析网页的库。目前，我使用Selenium来使用xpath访问网页中的元素。
我正在考虑用一些离线xpath工具来代替Selenium。然而，经过思考，我开始怀疑它是否会起作用，因为javascript可能会改变DOM。在这种情况下，不可能使用不呈现网页的xpath工具。那么Selenium是
浏览 2提问于2014-09-17得票数 1
回答已采纳
1回答
我试图访问一个专有的网站，提供访问一个大型数据库。数据库相当大(数十亿个条目)。数据库中的每个条目都是指向一个网页的链接，该网页本质上是一个包含我需要的信息的平面文件。我有大约2000项从数据库和他们相应的网页在数据库。我正试图解决两个相关的问题：
如何让wget (或其他类似的程序)读取cookie数据。
浏览 1提问于2018-03-21得票数 0
我是一个新的网页开发人员，我想知道是否有任何提示，如果您的网页没有正确呈现，由于与JavaScript，超文本标记语言或CSS相关的问题。以及可能使用的工具。
浏览 0提问于2011-02-14得票数 1
互联网上的页面抓取对我来说似乎有点困难，因为有越来越多的网站依赖于JavaScript来渲染屏幕的某些部分。在我看来，由于发布了如此多的开源布局和JavaScript渲染器(如、和 + )，一定有人开发了一个工具来下载页面并渲染其JavaScript，而无需运行实际的浏览器。我对任何可以完成以下一项(或两项)的工具或库都感兴趣：
浏览 45提问于2009-04-07得票数 18
有没有一个命令行工具(最好是Linux)可以在任何JavaScript执行后输出结果？
由于许多网站使用Javascript实质上修改输出，因此有时使用HTML解析器从网页读取数据是不够的。命令行实用程序或库可以让您在执行任何初始JavaScript后看到结果超文本标记语言，这可能对此有所帮助。
浏览 2提问于2009-08-14得票数 2
回答已采纳
9回答
我有一个非常具体的测试设置在头脑中。我想启动一个理解Javascript和可以使用HTTP代理的web浏览器，将它指向一个URL (理想情况下，通过在命令行中指定它以及代理配置)，等待页面加载，同时侦听(在代理中)请求随着网页的呈现和Javascript的执行而生成，然后杀死整个事情并重新启动。我根本不关心页面是如何以图形的方式呈现的。
我应该<
浏览 0提问于2010-05-08得票数 2
回答已采纳
我正在编写一个python代码，首先，获取一个网页的完整源代码，以便稍后对其进行刮除。但是当我试图获取源代码时--我看到了前面提到的消息(“如果你看到这条消息，这意味着你的浏览器上已经禁用了JavaScript，请让JS让这个应用程序工作”)。此外，当我单击F12查看“元素”时，整个代码同时出现，按Cntrl +U查看源代码与使用下面提到的py脚本获得它的结果相同soup =Beaut
浏览 4提问于2022-10-30得票数 -1
1回答
我知道可以使用诸如wget或curl之类的工具来执行来自命令行的HTTP请求，也可以使用来自各种编程语言的HTTP请求。这些工具还支持获取HTML代码中引用的图像或其他文件。我正在搜索的是一种机制，它也执行将图像呈现到HTML画布中的网页的JavaScript。然后，我希望将呈现</e
浏览 2提问于2020-01-17得票数 1
回答已采纳
1回答
我有一个要求，我需要打印一个PDF格式的网页。
我需要用pdf打印这一页。
如果可能的话，任何人都可以让我知道吗？(需要使用powershell实现自动化，这样就可以自动下载)。)
浏览 0提问于2021-04-13得票数 -4
是否有一个工具、库或扩展可以为Subversion存储库生成ASCII艺术风格(比如艺术牛仔或JavE )的修改图，从而可以在命令行接口中使用？我想将生成修订图的功能添加到bash脚本中，我在工作中使用了bash脚本，它目前作为一种用于与存储库交互的简单决策支持系统。我正在搜索的关键功能是在命令行</e
浏览 5提问于2011-11-08得票数 1
回答已采纳
我有一个小但有趣的开发应用程序。这是一个快速的实验，以了解更多关于redux和react的知识，我认为这个应用程序已经足够成熟，可以开始学习优化了。例如，我有一个错误组件，只有当我必须显示不太可能出现的错误时才需要它，所以这就是我所做的，而且令人惊讶的是(根据灯塔)，所有的第一次度量(第一次交互的时间，第一次有意义的绘制的时间等等)都变得更糟了。下面是我所能得到的最好的</
浏览 0提问于2018-11-30得票数 9
我经常通过在开发人员模式下打开浏览器、在页面周围单击(或者用javascript自动完成)以及在控制台上下载一些带有小javascript脚本的网页来解决与在网页上获取我需要的大量信息有关的问题。我知道谷歌Chrome有这个命令行工具做一些无头操作，他们甚至有一个node.js库来做这种事情.但是，我也知道还有其他的选择，比如emacs也有一些自动获取网页信息<e
浏览 0提问于2021-04-26得票数 3
回答已采纳
1回答
我是否应该考虑使用Firebase存储网页上呈现的图像？这些可能是在产品列表页面上呈现的图像或其他资源，如英雄图像。图像CDN是一个很好的选择，而不是防火墙存储吗？
浏览 6提问于2022-02-20得票数 1
回答已采纳
最近，我正在从事商业项目，该项目需要基于一些动态的HTML内容生成PDF，现在我已经用一个名为WKHTMLTOPDF ()的java库实现了这个功能。这个库是一个命令行工具，用户浏览器webkit作为呈现引擎，因为我刚开始使用java开发，我不确定在使用这个库时是否存在安全性或性能问题。如果这不是一个好的解决方案，是javascript插件一个替
浏览 3提问于2015-06-20得票数 0
我需要一个简单的python库来将PDF转换成图像(按原样呈现PDF )，但是经过几个小时的搜索之后，我发现了像pdf2image python这样的库(以及许多类似的库)，它们依赖于外部应用程序或包装命令行工具尽管存在允许在无服务器设置中使用这些库的解决办法，但它们都会使我们的部署复杂化，并且需要创建像Execution Environment
浏览 7提问于2021-08-26得票数 1
回答已采纳
3回答
乳胶的替代品
、、
我在寻找乳胶的替代品。我知道乳胶很适合数学，但在这种情况下，它不适合。所需特征：对latin1的支持创建PDF (DIN A4)
在没有gui的linux上工作。基于文本的，而不是基于GUI的(li
浏览 0提问于2018-09-19得票数 2
11回答
你使用任何类型的集成开发环境(Aptana、Dashcode或类似的)吗？你使用什么JavaScript库或框架？你使用任何编译成JavaScript的语言(GWT、haxe、Emacs单元测试框架吗？如何调用它们？可以从编辑器/集成开发环境、命令行、网页中的浏览器、JavaScript调试器调用它们吗？(能够从命令行
浏览 55提问于2009-09-26得票数 59
回答已采纳
当我通过Firefox保存网页时，我会得到如下目录结构：├── Some Page/所以我们有一个.html文件和一个包含图像、javascript、css等的文件夹。我是否可以使用wget (或任何其他命令行工具)获得相同的结果(html +单个大文件夹)？
编辑:我需要这个，因为我下载多个网页，有时它是一个混乱的检查每个页
浏览 0提问于2020-08-08得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
