StormCrawler maven打包错误

文章/答案/技术大牛

发布

1回答

maven、web-crawler、stormcrawler

StormCrawler的资源和配置集在我的计算机上的/Users/deividas/git/selenium-tutorial中“无法解析项目的依赖项在中心

浏览 18提问于2018-03-05得票数 2

回答已采纳

1回答

我使用的是风暴爬虫1.16、apache 1.2.3、maven 3.6.3和jdk 1.8。=storm-crawler-elasticsearch-archetype -DarchetypeVersion=LATEST /crawler$[ERROR] Re-run Maven using the -X switch to enable full debug logging.com.digitalpebble.stormcrawler.spout.File

浏览 1提问于2020-06-29得票数 1

回答已采纳

2回答

启用tika配置时，TextExtraction不起作用

web-crawler、stormcrawler

我正在分享我的配置是否配置中有任何错误。/POM/4.0.0 http://maven.apache.org/maven-v4_0_0.xsd"> <groupId<groupId>org.apache.maven.plugins</groupId> <arti

浏览 23提问于2019-03-21得票数 0

1回答

风暴爬虫:用于解析PDF属性的Apache

web-crawler、apache-tika、stormcrawler

我添加了Tika作为对我的StormCrawler实现的引用，它允许在爬行中获取PDF文档。但是，标题、作者和其他属性没有被解析。/maven-v4_0_0.xsd"><groupId>xyz.com</groupId> <artifactId>mave

浏览 0提问于2018-05-10得票数 0

回答已采纳

1回答

您如何设置风暴爬行器来运行色驱动程序而不是phantomJS？

selenium-chromedriver、stormcrawler

描述了如何设置使用phantomJS运行的风暴爬虫，但是phantomJS似乎无法获取和执行外部链接的javascript页面(例如，链接到直接页面上下文之外的javascript代码)。不过，Chromedriver似乎能够处理这一案件。我如何设置风暴爬虫来运行铬驱动器而不是phantomJS？

浏览 2提问于2021-04-29得票数 0

回答已采纳

1回答

风暴爬虫->弹性搜索的最佳设置，如果爬行的礼貌不是问题？

elasticsearch、web-crawler、stormcrawler

POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" <mo

浏览 0提问于2019-03-21得票数 0

回答已采纳

1回答

stormcrawler -当http.content.limit为-1时，解析器螺栓上出现堆栈溢出错误

web-crawler、stormcrawler

Storm Crawler在Kubernetes集群中运行，我们在JSoupParserBolt中收到许多StackOverFlow错误atcom.digitalpebble.stormcrawler.parse.JSoupDOMBuilder.createDOM(JSoupDOMB

浏览 0提问于2018-11-01得票数 1

1回答

如何开始使用风暴爬行器

maven、web-crawler、stormcrawler

我正试着开始使用，但是对于Maven，我有点困惑，因为它不太熟悉Maven。我只是简单地克隆，cd的github，然后运行mvn干净安装吗？或者我是mkdir风暴爬行器，cd进入其中，并运行所有在stormcrawler.net入门页面上的maven命令？将maven下载我需要的一切，然后如何运行Storm-爬虫。风暴爬行器看起来很酷，但是Maven对我来说是全新的.(我对npm很熟悉--他们一直很简单！)

浏览 1提问于2017-05-23得票数 0

回答已采纳

2回答

部署WAR包TOMCAT

java、maven、tomcat、war

我有两个相同的WAR文件:一个不使用Maven打包，另一个使用Maven打包。当我尝试使用Tomcat部署Maven打包的WAR时，我得到一个HTTP状态404错误(请求的资源不可用)，原来的WAR (没有使用Maven打包)运行得很顺利。我确信使用Maven打包的WAR具有所有必需的文件，因为它与原始包完全相同。有没有办法解决这个问题？

浏览 2提问于2015-07-16得票数 1

2回答

Tika Parser减慢StormCrawler

web-crawler、stormcrawler

" className: "com.digitalpebble.stormcrawler.bolt.FetcherBolt" className: "com.digitalpebble.stormcrawler.bolt.JSoupParserBolt" - id:

浏览 2提问于2019-03-08得票数 2

1回答

当我得到一个“无法确定代码源代码存档”时，有什么问题？

java、maven、executable-jar、spring-boot

我有一个spring引导项目，它创建了一个可执行的JAR。在mvn clean install之后，我在运行jar时不时会得到以下异常： at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method) at sun.reflect.DelegatingMethod

浏览 3提问于2014-08-21得票数 0

1回答

找不到工件spring-boot-thin-layout:jar:1.0.27错误

java、spring-boot、maven

有关错误的更多信息：无法在项目插件上执行目标org.springframework.boot:spring-boot-maven-plugin:2.4.3:repackage (重新打包)：目标org.springframework.boot:spring-boot-maven-plugin:2.4.3:repackage的执行重新打包失败:带有org.springframework.boot.experimental的插件org.springframework.boot:spring-boot-<em

浏览 63提问于2021-03-17得票数 0

1回答

获取StormCrawler上的拓扑以正确写入warc文件

java、web-crawler、apache-storm、stormcrawler、apache-storm-topology

stormcrawler maven原型似乎与我的项目中的warc模块不太协调。目前它只创建0字节的空文件，名称类似于"crawl-20180802121925-00000.warc.gz“。我尝试通过创建一个默认项目来启用warc编写，如下所示：然后将依赖项添加到pom.xml中的warc模块，如下所示 <dependency

浏览 2提问于2018-08-02得票数 0

3回答

风暴爬虫和弹力搜索版本

maven、elasticsearch、web-crawler、stormcrawler

我感到困惑的是，当涉及到pom.xml文件时，对于version number <groupId>com.digitalpebble.stormcrawler<我仍然在尝试更好地使用Maven和Java构建过程等等。

浏览 7提问于2017-05-25得票数 0

回答已采纳

1回答

POM父母问题如何

java、eclipse、maven、plugins

这是我的第一个Maven插件项目，我遵循这个指南这是我的水壶 <project xmlns="http://maven.apache.org/POM/4.0.0"xmlns:xsi="http://www.w3.org/2001/

浏览 2提问于2016-11-03得票数 1

回答已采纳

1回答

当pom.xml被打包ejb时Maven错误，但当打包为jar时就消失了。

java、maven、jakarta-ee、ejb、pom.xml

当我将我的pom.xml打包为EJB时，我会得到一个我不理解的错误。如果我以任何方式触摸包，就会显示此错误，以包括Ctrl+S和Maven更新。如果我将包装改为jar，错误就会消失。" xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven</e

浏览 2提问于2014-03-12得票数 2

回答已采纳

2回答

StormCrawler无法连接到ElasticSearch

java、elasticsearch、web-crawler、apache-storm、stormcrawler

全错误片段： at com.digitalpebble.stormcrawler<

浏览 0提问于2018-03-14得票数 0

回答已采纳

1回答

StormCrawler:集群的最佳拓扑结构

web-crawler、stormcrawler

" - id: "fetcher" parallelism: 5 className: "com.digitalpebble.stormcrawler.bolt.SiteMapParserBolt" - id

浏览 1提问于2018-05-29得票数 1

回答已采纳

4回答

Spring Boot多模块maven项目重新打包失败

java、spring-boot、spring-mvc、multi-module、spring-boot-maven-plugin

我按照他的步骤一步一步地为spring boot上的spring宠物诊所创建多模块maven项目。当我单击我的根模块上的package时，它显示重新打包失败，无法找到主类。plugin> <artifactId>spring-boot-maven-pluginconfiguration> </execution

浏览 126提问于2019-07-25得票数 3

1回答

风暴爬虫没有从网页中检索所有文本内容

stormcrawler

上以无头模式启动chromedriver :9515作为风暴爬行器用户(通过一个单独的python，如下面所示)，然后重新启动风暴爬行器拓扑(也作为风暴爬行器用户)，但最终导致与Chrome相关的一系列错误当我尝试从命令行(即chromedriver --headless &)启动chromedriver时，也会出现相同的错误堆栈。(RemoteDriverProtocol.java:101) ~[stormcrawler-1.0-SNAPSHOT.jar:?]at com.digitalpebble.stormcrawle

浏览 3提问于2021-04-16得票数 1

回答已采纳

点击加载更多