开发工具eclipes安装使用

**

Eclipes安装（后序Eclipes使用）

**

下载网站
https://www.eclipse.org/downloads/

点击Download Packages

1.eclipse classic 是eclipse的标准版：标准版;

2.eclipse ide for java developer : 标准版基础上增加java开发插件;

3.Eclipse IDE for Java EE Developers：标准版基础上增加j2ee开发的插件

4.Eclipse for RCP/Plug-in Developers ：标准版基础上增加RCP和插件开发

5.Eclipse IDE for C/C++ Developers :标准版基础上增加C/C++开发的插件

如果只是用于学习，那么标准版足够使用，下载标准版即可（如果要求较高或用于做项目则下载标准版加Java开发）

点击64-bit或者32-bit…(同jdk安装，看自己电脑的操作位数)

点击红框，弹出不用管，等一段时间保存可自动下载
或者点击Select Another Mirror找出我国的文件，下载速度可快许多

注意
我们之前所检查的java位数为32位或64位，我们eclipes也需要下载相应位数，否则eclipes不可正常运行（eclipes不用设置变量等，可自动查找jdk）

下载完成解压后即可直接打开，不需要安装

解压完成后找出eclipes.exe文件，可直接运行。

运行后出来一个路径(这个路径代表你工程的路径)，每次打开都有这个路径，记得此路径，可在磁盘中找到你的创建的Java文件

这里分享一个eclipes包 x64
链接：https://pan.baidu.com/s/1DhSD2o1dP6g2pBlnzkeJUw
提取码：91lq

上一篇 》
Java安装

下一篇 》
Eclipes的Java项目创建

Eclipse：IDE(集成开发环境)集成编写，分析，编译，调试等一体化功能的开发工具
特点：免费，纯Java语言编写，免安装，拓展性强

1.选择工作空间
存放源码的目录
2.创建项目
点击file或者右击最左侧空白处，选择java projact,写一个项目名称，finish即可
3.创建包
在src目录下创建包
4.创建类
在包下创建一个类，填写类名，finish即可
5.编写代码
在main方法里编写即可
6.编译：
自动编译
7.运行
在文件或者要运行的文件内容中，右击–run as–Java Application

Eclipse基本配置
1.行号的显示隐藏
在代码最左边空白处，右击–show line number
2.字体大小
window–perfenrence–General–Appearance–Color And Font – Java Editor Text Font
3.窗口乱了
window–Perspective–Reset Perspective
4.控制台不见了
window–Show Views – 找自己需要的
5.编码格式
window–perfenrence–General–Workspace

常用快捷键
内容提示键alt+/
main
syso
Ctrl+1

单行注释 Ctrl+/
多行注释
Ctrl+Shift+/
Ctrl+Shift+
格式化
Ctrl+shift+f

Eclipse项目删除和导入
删除
1.从项目区域删除
2.从硬盘删除
导入
项目区域右击–import–General–Existing Project Into WorkSpace–选择你要导入的项目

Eclipes实现Mapreduce的配置(虚拟机中)

1.插件准备

我们需要下载 hadoop-eclipse-plugin-2.7.1.jar插件,插件已经上传到群文件中

链接: https://pan.baidu.com/s/19Zr6zkvWXK_u8ZIm-F-aBw 
提取码: v9xx

如果你的文件下载在了windows中,点击下方的链接完成文件的上传

windows上传文件到虚拟机的几种方法

如果我们的文件在下载目录,我们可以通过下面的命令检查一下是否成功上传

ls | grep hadoop-e

接下来的操作假设我们已经把文件上传到了虚拟机下载目录中

2.Eclipes配置

接下来我们进入虚拟机中进行操作

1)启动hadoop

start-dfs.sh # 启动hadoop
jps	# 查看启动状态

2)复制插件到eclipes\plugins 目录下

可以通过whereis eclipse来查看 eclipes的位置

我的eclipes目录在/usr/local/eclipse
注意:如果有些人 有多个eclipes路径 可以试试 /usr/lib/eclipse
复制插件 cp命令

hadoop@hadoop-VirtualBox:~$ cp ~/下载/hadoop-eclipse-plugin-2.7.1.jar /usr/local/eclipse/plugins/
hadoop@hadoop-VirtualBox:~$ chown hadoop:hadoop /usr/local/eclipse/plugins/hadoop-eclipse-plugin-2.7.1.jar 

3)通过命令使插件生效

生效插件,启动eclipes

hadoop@hadoop-VirtualBox:~/下载$  cd /usr/local/eclipse
hadoop@hadoop-VirtualBox:/usr/local/eclipse$ ./eclipse -clean # 重启eclipes
hadoop@hadoop-VirtualBox:/usr/local/eclipse$ eclipse -clean # 或者也可以用这个

注 clean命令只需要用一次即可,为了使插件生效,之后仍然可以和原先一样正常启动

4)eclipes中Map/Reduce配置

eclipes已经启动了,我们可以随便创个项目Test,直接finish

点击Window>Preferences 进入设置

题外话

如果插件没有出现的话可能是因为放的目录不对,对于 whereis eclipse有多种路径的情况下,可以换一个路径的plugins试试 比如 /usr/lib/eclipse/plugins

继续正文

点击设置中的Hadoop Map/Reduce 就是我们刚刚安装的插件
点击后面的Browse按钮,把虚拟机中的Hadoop位置添加进去
usr/local/hadoop

效果如下,接下来 Apply and Close

但是我们发现左边的视图仍没有改变,这是因为我们处于默认的Java default视图下,我们需要切换到Map/reduce
点击 Window>Perspectivr>open Perspectivr>other

选择Map/Reduce视图

就得到了我们想要的结果了

点击下面的蓝蓝的小图标进行创建

默认是这样的

我们只需要为它取名字,修改DFS Master的端口号为9000即可,点击Finish

可以看到HDFS的目录已经出现在了Eclipes中双击可以查看内容，右键点击可以上传、下载、删除 HDFS 中的文件，无需再通过繁琐的 hdfs dfs -ls 等命令进行操作了。
注意,这里的文件是自己事先上传到HDFS中的,并不是打开就有这么多

Tips

HDFS 中的内容变动后，Eclipse 不会同步刷新，需要右键点击 Refresh，才能看到变动后的文件。

5)代码测试

新建一个MapReduce Project ,随便取个名字,直接finish

我们可以看到.eclipes已经自动为我们导入了所需要的包

在刚创建的项目中新建一个Class

代码如下

package org.apache.hadoop.examples;
 
import java.io.IOException;
import java.util.Iterator;
import java.util.StringTokenizer;
import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.io.IntWritable;
import org.apache.hadoop.io.Text;
import org.apache.hadoop.mapreduce.Job;
import org.apache.hadoop.mapreduce.Mapper;
import org.apache.hadoop.mapreduce.Reducer;
import org.apache.hadoop.mapreduce.lib.input.FileInputFormat;
import org.apache.hadoop.mapreduce.lib.output.FileOutputFormat;
import org.apache.hadoop.util.GenericOptionsParser;
 
public class WordCount {
    public WordCount() {
    }
 
    public static void main(String[] args) throws Exception {
        Configuration conf = new Configuration();
        String[] otherArgs = (new GenericOptionsParser(conf, args)).getRemainingArgs();
        if(otherArgs.length < 2) {
            System.err.println("Usage: wordcount <in> [<in>...] <out>");
            System.exit(2);
        }
 
        Job job = Job.getInstance(conf, "word count");
        job.setJarByClass(WordCount.class);
        job.setMapperClass(WordCount.TokenizerMapper.class);
        job.setCombinerClass(WordCount.IntSumReducer.class);
        job.setReducerClass(WordCount.IntSumReducer.class);
        job.setOutputKeyClass(Text.class);
        job.setOutputValueClass(IntWritable.class);
 
        for(int i = 0; i < otherArgs.length - 1; ++i) {
            FileInputFormat.addInputPath(job, new Path(otherArgs[i]));
        }
 
        FileOutputFormat.setOutputPath(job, new Path(otherArgs[otherArgs.length - 1]));
        System.exit(job.waitForCompletion(true)?0:1);
    }
 
    public static class IntSumReducer extends Reducer<Text, IntWritable, Text, IntWritable> {
        private IntWritable result = new IntWritable();
 
        public IntSumReducer() {
        }
 
        public void reduce(Text key, Iterable<IntWritable> values, Reducer<Text, IntWritable, Text, IntWritable>.Context context) throws IOException, InterruptedException {
            int sum = 0;
 
            IntWritable val;
            for(Iterator i$ = values.iterator(); i$.hasNext(); sum += val.get()) {
                val = (IntWritable)i$.next();
            }
 
            this.result.set(sum);
            context.write(key, this.result);
        }
    }
 
    public static class TokenizerMapper extends Mapper<Object, Text, Text, IntWritable> {
        private static final IntWritable one = new IntWritable(1);
        private Text word = new Text();
 
        public TokenizerMapper() {
        }
 
        public void map(Object key, Text value, Mapper<Object, Text, Text, IntWritable>.Context context) throws IOException, InterruptedException {
            StringTokenizer itr = new StringTokenizer(value.toString());
 
            while(itr.hasMoreTokens()) {
                this.word.set(itr.nextToken());
                context.write(this.word, one);
            }
 
        }
    }
}

在这之前,我们要先往hdfs中的input目录上传2个要统计的文件,内容可以自定

接下来我们就可以右键run,当然在这里我们要自己设置一下参数

手动输入参数,点击运行,我们会发现他报错了,并且错误原因是 Path not exist

这是因为我们没有上传我们配置过的文件到项目的src目录下

将我们之前修改过的文件和日志加入eclipes的项目src目录下

cp /usr/local/hadoop/etc/hadoop/core-site.xml ~/workspace/Mytest/src
cp /usr/local/hadoop/etc/hadoop/hdfs-site.xml ~/workspace/Mytest/src
cp /usr/local/hadoop/etc/hadoop/log4j.properties ~/workspace/Mytest/src

右键src Refresh刷新,就可以看到他们了

接下来按刚刚的步骤重新运行,记得输入参数,运行结果如下

刷新之后我们就可以看到output文件夹了

里面就存放了我们要统计的结果

成功!