2回答
论Nutch 1.7
apache、search、solr、nutch
Solr和Nutch已经在本地设置(在不同的目录上)，我希望爬行一个URL，索引它，然后将该索引集成到Solr中。at org.apache.hadoop.mapred.JobClient.runJob(JobClient.java:1357)
at org.apache.nutch.indexer.IndexingJob.indexat org.apache.nutch.crawl.Crawl.run(
浏览 0提问于2013-10-23得票数 1
1回答
在Windows上安装Apache
java、hadoop、solr、nutch
我正试图在Windows 7 (64位)上将Apache与Apache 1.14集成，但在运行Nutch时遇到了一个错误。org.apache.hadoop.mapreduce.Job.waitForCompletion(Job.java:1308) at org.apache.nutch<
浏览 3提问于2018-06-20得票数 1
2回答
nutch1.14重复数据删除失败
hadoop、solr、web-crawler、bigdata、nutch
我已经在CentOS Linux7.3.1611版上集成了nutch 1.14和solr-6.6.0。我在种子列表中给出了大约10个urls，该列表位于/usr/local/apache-nutch-1.13/urls/seed.txt。我遵循
[root@localhost apache-nutch-1.14]# bin/nutch dedup http://ip:8983/so
浏览 11提问于2018-01-09得票数 1
1回答
Apache与MySQL在Windows上的集成
java、mysql、nutch
我试图在Windows 8平台上将ApacheNutch2.1与Mysql服务器集成。我遵循教程。我对apache 2.1做了如下修改。我下载了apache-nutch-2.1-src.zip并提取了。(InjectorJob.java:219) at org.apache.nutch.crawl.Crawler.run
浏览 1提问于2013-06-15得票数 0
1回答
Nutch Crawler读取分段结果
apache、nutch、web-crawler
我使用apache-nutch-crawler1.6进行爬行。/ubuntu/nutch/framework/apache-nutch-1.6/blogs/segments/2013062110/crawl_generate
Input path does/apache-nutch-1.6/blogs/segments/2013062110&#
浏览 0提问于2013-06-21得票数 1
1回答
Nutch 2.0和Hadoop。如何防止conf/regex-urlfilter.txt缓存
hadoop、nutch
我在一台机器上安装了nutch 2.x和hadoop 1.2.1。/webcrawer/apache-nutch-2.2.1/conf/regex-urlfilter.txt然后我跑
crawl urls/seed.txt TestCr
浏览 1提问于2013-12-13得票数 1
1回答
apache nutch中的依赖关系问题
java、mapreduce、nutch
尝试将apache nutch与hadoop集成。构建apache-nutch-1.15.job文件后，使用ant将其放在运行时文件夹中，并尝试运行脚本bin/crawl，但得到一些依赖错误。at org.apache.nutch.net.URLNormalizers.<init>(URLNormalizers.java:146)
at org.apache.nutch.crawl.G
浏览 30提问于2019-03-28得票数 2
2回答
Nutch路径错误
solr、nutch、web-crawler
/nutch/nutch/runtime/local/crawl/segments/20111027224701 at org.apac
浏览 0提问于2011-10-28得票数 2
1回答
使用Gora集成Nutch- Hbase和Solr
solr、hbase、nutch、gora
我遵循了nutch2教程并成功地将nutch与HBase集成--我的问题是当我在runtime/local/bin目录中使用以下命令.(NutchJob.java:54) a
浏览 3提问于2013-10-18得票数 0
1回答
Apache Nutch 2.3:引发错误失败，退出值为255
hadoop、nutch
我使用的是apache nutch 2.3版本。我的hadoop版本是2.6.0。hadoop在单个节点上运行。.: file:/usr/local/nutch/runtime/local/bin/--index
at org.apache.hadoop.mapreduce.lib.input.FileInputFormat.listStatus(J
浏览 2提问于2016-01-04得票数 1
1回答
本地Eclipse中的Apache Nutch 1.9将在Amazon EMR上远程运行
java、eclipse、hadoop、amazon-web-services、nutch
我现在正在尝试从我的Eclipse内部运行Apache Nutch 1.9。我做了Ant构建来创建Nutch Eclipse项目，并且我正在成功地在Eclipse工作区中导出。Injector: java.io.IOException: Failed to set permissions of path: \tmp\hadoop-Kajari_G\mapred\staging\Kajari_G881485826\.staging to 0700
我发现这是因为Hadoop的权限问题。您能指导我如何让我的<
浏览 2提问于2015-04-20得票数 0
2回答
Nutch Crawl错误-输入路径不存在
java、hadoop、nutch、web-crawler
我有两个datanode服务器的nutch/hadoop。我尝试抓取一些urls，但nutch失败，并显示以下错误：Fetcher: org.apache.hadoop.mapred.InvalidInputExceptionorg.apache.hadoop.mapred.FileInputFormat.listStatus(FileInputFormat.java:190)
浏览 0提问于2011-09-10得票数 1
回答已采纳
org.apache.hadoop.mapreduce.Job.submit(Job.java:432) at org.apache.hadoop.util.ToolRunner.run(ToolRunner.java:65)
at org.apache.nutch
浏览 1提问于2013-07-31得票数 1
1回答
nutch 1.2 solr 3.1集成问题
solr、nutch、java.lang.class
我已经成功地使用Nutch1.2 .Now抓取了一个网站，我想将其与Solr3.1集成。) at org.apache.solr.client.solrj.SolrServer.add(SolrServer.java:49) at org.apache.nutch.indexer.solr.SolrWriter.close(SolrWriter.java:75) at org.apache.nutch.indexer.IndexerOutputFormat$1.clos
浏览 2提问于2013-07-08得票数 0
回答已采纳
1回答
在hadoop模式下运行nutch时，nutch gora类不会
hadoop、nutch、gora
当我尝试的时候13/07/09 09:02:46 WARN conf.Configuration: nutch-default.xml(Injector
浏览 7提问于2013-07-09得票数 0
4回答
执行爬网时出现Nutch问题
apache、lucene、nutch
当我尝试使用nutch运行爬网执行时，我得到了以下错误：
运行时出错: /cygdrive/c/Users/User5/Documents/Nutch/apache-nutch-1.11/runtime/local/bin/nutch注入测试爬网/爬网数据库C:/Users/User5/Documents/Nutch/<
浏览 7提问于2015-12-24得票数 1
2回答
Nutch路径错误
nutch
Exception in thread "main" org.apache.hadoop.mapred.InvalidInputException: Input path does not existat org.apache.hadoop.mapred.JobClient.writeOldSplits(JobClient.java:810)
at org.apache.hadoop.mapred.JobClient.submitJobInternal
浏览 0提问于2012-03-02得票数 1
1回答
nutch on Hadoop on google cloud- gloud dataproc
hadoop、nutch、gcloud、google-cloud-dataproc
当我试图在google (dataproc)上运行hadoop上的nutch时，我得到了以下错误。你知道我为什么要面对这个问题吗
user@cluster-1-m:~/apache-nutch-1.7/build$ hadoop jar /home/user/apache-nutch-1.7/runtime/deploy/apache-nutch-1.7.
浏览 6提问于2016-09-11得票数 1
1回答
Apache Nutch Hadoop集成
java、apache、nutch
我将apache-nutch-1.15和hadoop配置为按照https://wiki.apache.org/nutch/NutchHadoopTutorial提供的链接在部署模式下运行 但是当我尝试运行下面的命令时hadoop jar apache-nutch-${version}.job org.apache.nutch.crawl.Crawl urls -dir craw
浏览 28提问于2019-03-13得票数 2
1回答
我想和Cygwin一起竞选Nutch。:936) at org.apache.hadoop.mapreduce.Job.waitForCompletion(Job.java:580) at
浏览 1提问于2013-10-01得票数 1
云服务器
ICP备案
对象存储
实时音视频
云点播
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号