在eclipse里面尝试着用nutch2.2.1版本抓取网页存储在MySQL数据库中出错

绝地反击T 2015-09-22 01:09:31

我在Cygwin下面执行bin/nutch crawl urls -depth 3 -topN 5也是出现这样的错去，请问是怎么回事呢？是不是那个hadoop-core-1.2.0.jar包要修改一下，网上有这么说，但是不知如何修改，为何修改它？

...全文

250 回复打赏收藏转发到动态举报

写回复

回复

切换为时间正序

请发表友善的回复…

发表回复

Nutch2.x 使用gora做数据抽象层，底层的数据存储可以支持Mysql，HBase，Cassandra等，而1.x是基于HDFS的。Nutch2.x官方推荐的是和HBase结合,不过这里我们先配置Nutch2.2.1和Mysql运行，因为Mysql查询起来更加直观，难...

Nutch2.x 使用gora做数据抽象层，底层的数据存储可以支持Mysql，HBase，Cassandra等，而1.x是基于HDFS的。Nutch2.x官方推荐的是和HBase结合,不过这里我们先配置Nutch2.2.1和Mysql运行，因为Mysql查询起来更加直观，难度也稍微低那么一点，通过和mysql的结合成功对nutch的流程理解有很大帮助，最后记录和讨论一下nutch2.2.1 + M...

此博客大部分转自：http://www.tuicool.com/articles/aAVFbm 如果出现PKIK之类错误，可以参考：http://stackoverflow.com/questions/42255752/nutch-2-x-ant-eclipse-build-failed

网上大部分的Nutch资料都是以前相对老的版本的一些介绍，其中介绍启动Nutch大多数是用如下命令： bin/nutchcrawlurls-topN10-depth1000 bin/nutch文件是一个shell脚本，我们在STS里面打开它可以观看它的代码，实际...

问题导读1.Windows7环境下MyEclipse+Nutch2.2.1+Mysql搭建包含哪些步骤？2.如何从eclipse中下载nutch？3.如何解决eclipse编码问题？一、环境准备首先肯定是配置开发环境，这里暂时不作详细描述。二、从svn检出项目1.png (38.36 KB, 下载次数: 5)2015-4-14 01:09 上传2.png (51.98 KB, 下载次数: 5)20...

搜索引擎技术

2,759

社区成员

2,049

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章