nutch出现org.apache.nutch.plugin.PluginRuntimeException错误

最新推荐文章于 2024-01-15 11:26:26 发布
原创 最新推荐文章于 2024-01-15 11:26:26 发布 · 247 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#Apache #Eclipse #Ant #.net #XML

本文介绍了一位用户在使用Nutch 1.2版本过程中遇到的问题：在执行特定命令时出现ClassNotFoundException错误。经过排查，发现是由于nutch-site.xml文件中的plugin.founders配置项未正确设置导致。通过将该配置项的值更改为build/plugins，问题得以解决。

下载了nutch1.2在eclipse中配置好能正确的运行，然后自己又在此源代码上面用ant编译，然后把编译出来的war,job,jar包都放在了源代码的根目录下，然后在终端命令执行bin/nutch urls/url.txt  -depth 2出现了错误

org.apache.nutch.plugin. PluginRuntimeException : java.lang. ClassNotFoundException : org.apache.nutch.net .urlnormalizer.basic.BasicURLNormalizer

这种错误！

最后发现是conf下面的nutch-site.xml中plugin.fouders选项没有设置好，把他的值设置为build/plugins搞定！

使用Apache Nutch抓取网站内容
taxCode的博客
02-12 1708
自定义爬网属性创建 URL 种子列表创建 URL 种子列表seed.txt配置正则表达式过滤器编辑文件并替换替换为与您要爬取的域匹配的正则表达式。例如，如果您希望将爬取限制到域注意：如果不指定要包含在 regex-urlfilter.txt 中的任何域，将导致链接到您的种子 URL 文件的所有域也被抓取。使用 URL 列表为 crawldb 设定种子1. 从初始种子列表引导现在我们有一个 Web 数据库（在当前目录下会新建一个crawl文件夹），其中包含您未爬取的 URL。
Nutch 运行错误
iteye_8029的博客
04-25 167
Exception in thread "main" java.io.IOException: Job failed! at org.apache.hadoop.mapred.JobClient.runJob(JobClient.java:1252) at org.apache.nutch.crawl.Injector.inject(Injector.java:217) at org.apa...
nutch配置到MyEclipse中出现org.apache.nutch.plugin.PluginRuntimeException
WitsMakeMen的专栏
05-01 2531
想把nutch-1.2的源码加载到MyEclipse中，所有的文件都加载成功了，而且在MyEclipse中也没有错误，然后运行Crawl.java类出现了下面的错误。 org.apache.nutch.plugin.PluginRuntimeException: java.lang.ClassNotFoundException: org.apache.nutch.net.urlnormalize
nutch部署过程中出现RuntimeException错误
WitsMakeMen的专栏
12-15 2979
nutch部署过程中出现了下面错误，主要是没有正确配置插件导致的，可以通过设置nutch-site.xml文件的plugin.folders属性解决问题   java.lang.RuntimeException: Error in configuring object at org.apache.hadoop.util.ReflectionUtils.setJobConf(Reflectio
PyCharm安装插件后重启报错：java.lang.RuntimeException
最新发布
企业实战系列集 ●●● https://ximenjianxue.blog.youkuaiyun.com
01-15 1215
相关经验表明，造成上述报错的原因有：新装插件损坏或不兼容、IDE安装文件损坏、补丁更新失败、缓存损坏或配置损坏，本例中就属于插件不兼容的情况。目录下相关文件，默认目录在：%LOCALAPPDATA%\JetBrains.PyCharm2018.1\system\。删除上图中安装的Sourcegraph目录，完成后再打开Pycharm即可，这时正常已经恢复了。4、如果还不行，可再删除配置目录：%APPDATA%\JetBrains\config。，不通OS和IDE版本对应位置不通，更多参看。
nutch在eclipse上运行时错误
Sweblish的专栏
04-20 7549
solrUrl is not set, indexing will be skipped... crawl started in: crwal rootUrlDir = urls threads = 10 depth = 2 solrUrl=null topN = 2 Injector: starting at 2012-04-20 14:39:30 Injector: crawl
基于ApacheNutch和Htmlunit的扩展实现AJAX页面爬虫抓取解析插件nutch-htmlunit.zip
07-19
Nutch Htmlunit Plugin 重要说明： 当前项目基于Nutch 1.X系列已停止更新维护，转向Nutch 2.x系列版本的新项目：http://www.oschina.net/p/nutch-ajax 项目简介 基于Apache Nutch 1.8和Htmlunit...
apache-nutch-1.4-src.tar.gz_nutch_搜索引擎
09-22
Apache Nutch 是一款高度可扩展的开源全文搜索引擎框架，它为构建自定义的网络爬虫和搜索引擎提供了强大的工具集。Nutch 的设计目标是处理大量网页数据，进行高效的抓取、索引和搜索操作。在“apache-nutch-1.4-src....
Nutch入门教程.pdf
06-07
Apache Nutch 是一个开源的网络搜索引擎框架，允许用户通过一个可定制的、分布式的方式爬取和索引网页。学习Nutch可以提供对搜索引擎内部工作原理的深入了解，特别是对那些对搜索排序的透明度、搜索引擎的内部工作...
Apache Nutch 1.4源码解读及使用指南
根据给定的文件信息，我们可以看出文件标题为"apache-nutch-1.4-src.zip"，这表明这是一个开源的Apache Nutch项目1.4版本的源代码压缩包。Apache Nutch是一个开源的网络搜索引擎项目，它是Apache Lucene项目的一部分...
探索rope
fang.lovest.yang的博客
06-04 1311
开发环境 1.官网下载rope源码 ，本机idea打开。https://gitee.com/starblues/rope/wikis 2.设置淘宝镜像 nodeJS的资源仓库在国内使用过程中，偶尔会遇到各种资源问题，通常设置为淘宝的镜像，网上很多说法是安装淘宝镜像，即 $ npm install -g cnpm --registry=https://registry.npm.taobao.org 然后再用到npm install的时候，使用cnpm install进行安装node_mo...
AS安装插件出错：java.lang.RuntimeException: com.intellij.ide.plugins.PluginManager
漠蓝的博客
08-19 3995
AS安装插件出错：java.lang.RuntimeException: com.intellij.ide.plugins.PluginManager 安装插件GsonFormat，按照网上搜索的步骤操作，最后一步时手欠点了DART插件之后打开AS出错，显示： 解决方法：C:\Users\ASUS.AndroidStudio3.4\config\plugins（这个可能Android studi...
RuntimeException运行时异常，出现此异常，程序中断（RuntimeException不能捕获，不能抛出，不需要捕获）运行时优先抛出异常
程序员猫爪
02-16 4536
RuntimeException运行时异常，出现此异常，程序中断（RuntimeException不能捕获，不能抛出，不需要捕获） 运行时优先抛出异常 其他类型的异常都要必须捕获或者抛出 Exception ：受检查的异常，这种异常是强制我们catch或throw的异常。你遇到这种异常必须进行catch或throw，如果不处理，编译器会报错。比如：IOException。 RuntimeException：运行时异常，这种异常我们不需要处理，完全由虚拟机接管。比如我们常见的NullPointerExcept
解决maven手动导jar包报Artifact Id cannot be empty问题
weixin_42333235的博客
07-19 4279
1.eclipse中——windows——preferences——maven——use settings添加本地maven下的settings.xml 2.windows——show view——maven——maven repositories，找到如图，鼠标右击找到Rebuild Index，随后耐心等待即可。 ...
常见的几种RuntimeException及其详解
热门推荐
StoneWords的博客
04-24 3万+
一般面试中java Exception（runtimeException ）是必会被问到的问题常见的异常列出四五种，是基本要求。更多的。。。。需要注意积累了 常见的几种如下： NullPointerException - 空指针引用异常ClassCastException - 类型强制转换异常。IllegalArgumentException - 传递非法参数异常。ArithmeticExce...
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值