时隔两个多月，继续学习hive的时候，发现start-all.sh后namenode没有启起来，查了一通，原因是每次开机都得重新格式化一下namenode才可以。需要改配置文件（以前用的好好的为啥要改…目前以我的水平还不是很理解），然后重新格式化。试了一下确实好使了，解决方法如下：

修改Hadoop/conf目录里面的core-site.xml文件：
<configuration>
    <property>
        <name>fs.defaultFS</name>
        <value>hdfs://这里换成了我的主机名(原来是实例ID)/内网ip:9000</value>
    </property>
</configuration>

保存后执行：
hadoop namenode -format

如果以后对这部分了解透彻了再补充吧。先记录下

hadoop启动后jps没有namenode

一般都是由于两次或两次以上格式化NameNode造成的，有两种方法可以解决：

1.删除DataNode的所有资料

2.修改每个DataNode的namespaceID(位于/home/hdfs/data/current/VERSION文件中)或修改NameNode的namespaceID(位于/home/hdfs/name/current/VERSION文件中)，

目的是两者一致。

但是查看后，两者的ID是一样的，

于是查看/usr/local/hadoop/logs下的namenode日志文件，发现错误是java.io.FileNotFoundException: /home/hadoop/hdfs/name/current/VERSION (Permission denied)



在网上搜索后，发现是/home/hadoop/hdfs/name/current/VERSION的权限问题，于是

hadoop@master:/usr/local/hadoop/bin$ sudo chmod -R 777 /home/hadoop/hdfs

再进行格式化：hadoop@master:/usr/local/hadoop/bin$ hadoop namenode -format

启动：hadoop@master:/usr/local/hadoop/bin$ start-all.sh

jps:hadoop@master:/usr/local/hadoop/bin$ jps

6692 JobTracker

6259 NameNode

6601 SecondaryNameNode

6810 Jps

由于看到datanode和tasktracker还没有启动，就用了以下命令进行启动，但是发现确实已经启动了。


jobtracker running as process 6692. Stop it first.

192.168.1.3: tasktracker running as process 4959. Stop it first.

192.168.1.4: tasktracker running as process 5042. Stop it first.

hadoop@master:/usr/local/hadoop/bin$ jps

6692 JobTracker

6259 NameNode

6601 SecondaryNameNode

7391 Jps

hadoop@master:/usr/local/hadoop/bin$ start-dfs.sh

Warning: $HADOOP_HOME is deprecated.


namenode running as process 6259. Stop it first.

192.168.1.3: datanode running as process 4757. Stop it first.

192.168.1.4: datanode running as process 4828. Stop it first.

192.168.1.2: secondarynamenode running as process 6601. Stop it first.


http://www.cnblogs.com/linjiqin/archive/2013/03/07/2948078.html

从百度知道里看到这么一句话，

提示都说了，不建议使用这个脚本，使用start-dfs.sh和start-mapred.sh来替代它。这说明脚本的作者或者维护人也觉得这个脚本可能有问题……
你要是有兴趣也可以自己改改……

hadoop启动后jps没有namenode
一般都是由于两次或两次以上格式化NameNode造成的，有两种方法可以解决：
1.删除DataNode的所有资料
2.修改每个DataNode的namespaceID(位于/home/hdfs/data/current/VERSION文件中)或修改NameNode的namespaceID(位于/home/hdfs/name/current/VERSION文件中)，
目的是两者一致。
但是查看后，两者的ID是一样的，
于是查看/usr/local/hadoop/logs下的namenode日志文件，发现错误是java.io.FileNotFoundException: /home/hadoop/hdfs/name/current/VERSION (Permission denied)
 
在网上搜索后，发现是/home/hadoop/hdfs/name/current/VERSION的权限问题，于是
hadoop@master:/usr/local/hadoop/bin$ sudo chmod -R 777 /home/hadoop/hdfs
再进行格式化：hadoop@master:/usr/local/hadoop/bin$ hadoop namenode -format
启动：hadoop@master:/usr/local/hadoop/bin$ start-all.sh
jps:hadoop@master:/usr/local/hadoop/bin$ jps
6692 JobTracker
6259 NameNode
6601 SecondaryNameNode
6810 Jps
由于看到datanode和tasktracker还没有启动，就用了以下命令进行启动，但是发现确实已经启动了。
jobtracker running as process 6692. Stop it first.
192.168.1.3: tasktracker running as process 4959. Stop it first.
192.168.1.4: tasktracker running as process 5042. Stop it first.
hadoop@master:/usr/local/hadoop/bin$ jps
6692 JobTracker
6259 NameNode
6601 SecondaryNameNode
7391 Jps
hadoop@master:/usr/local/hadoop/bin$ start-dfs.sh
Warning: $HADOOP_HOME is deprecated.

namenode running as process 6259. Stop it first.
192.168.1.3: datanode running as process 4757. Stop it first.
192.168.1.4: datanode running as process 4828. Stop it first.
192.168.1.2: secondarynamenode running as process 6601. Stop it first.
http://www.cnblogs.com/linjiqin/archive/2013/03/07/2948078.html
从百度知道里看到这么一句话，
提示都说了，不建议使用这个脚本，使用start-dfs.sh和start-mapred.sh来替代它。这说明脚本的作者或者维护人也觉得这个脚本可能有问题……
你要是有兴趣也可以自己改改……

在主节点机器上执行命令/opt/modules/app/hadoop-2.7.4/sbin/start-all.sh（相当于执行/opt/modules/app/hadoop-2.5.0/sbin/start-dfs.sh和/opt/modules/app/hadoop-2.5.0/sbin/start-yarn.sh）
然后jps发现没有namenode，查看logs日志

发现namenode没有格式化

于是执行格式化namenode节点命令，注意每次格式化时一定要把原来NameNode和DataNode下的文件全部删除，不然会报错，NameNode和DataNode所在目录是在core-site.xml中hadoop.tmp.dir、dfs.namenode.name.dir、dfs.datanode.data.dir属性配置的。



/opt/modules/app/hadoop-2.7.4/sbin/start-all.sh

然后查看tmp目录下有没有新建文件（我的namenode重新格式化了好几次才出现新文件），如图


。。。从前车马很慢，书信很远，一生只够爱一个人！
转载于:https://blog.51cto.com/13670314/2160425