精华内容
下载资源
问答
  • hadoop集群NameNode起不来解决方法

    千次阅读 2016-11-17 16:10:30
    1、关掉hadoop集群 2、进入主节点/home/hadoop/hadoop-2.6.0/dfs/name/current,删掉VERSION,从节点也是 3、格式化NameNode : hadoop -NameNode -format 4、重新启动集群即可

    1、关掉hadoop集群

    2、进入主节点/home/hadoop/hadoop-2.6.0/dfs/name/current,删掉VERSION,从节点也是

    3、格式化NameNode : hadoop  -NameNode  -format

    4、重新启动集群即可

    展开全文
  • 2020-03-22 22:00:51,467 ERROR org.apache.hadoop.hdfs.server.namenode.NameNode: Failed to start namenode. org.apache.hadoop.hdfs.server.common.InconsistentFSStateException: Directory /export/servers...

    保错

    2020-03-22 22:00:51,467 ERROR org.apache.hadoop.hdfs.server.namenode.NameNode: Failed to start namenode.
    org.apache.hadoop.hdfs.server.common.InconsistentFSStateException: Directory /export/servers/hadoop-2.6.0-cdh5.14.0/HAhadoopDatas/tmp/dfs/name is in an inconsistent state: storage directory does not exist or is not accessible.

    分析 格式化文件已删

    解决方法

    1 .关闭集群
    2.格式化hdfs 命令:hdfs namenode -format(注意需要temp文件下的文件拷贝到其他节点上)
    3.打开集群

    展开全文
  • 但是虚拟机重启之后NameNode,DataNode就再也起不来了,log如下 log里说namenode没有格式化,但是我都会跑hdfs namenode –format命令格式化的 请大家给点主意,谢谢 ****************************************...
  • hadoop第一次启动时没有问题,但机子重启之后就会出现 irectory /tmp/hadoop-hadoop/dfs/name does not exist. 2013-02-02 16:49:29,297 ERROR org.apache.hadoop.hdfs.server.namenode.FSNamesystem: ...

    hadoop第一次起启动时没有问题,但机子重启之后就会出现

    irectory /tmp/hadoop-hadoop/dfs/name does not exist. 2013-02-02 16:49:29,297 ERROR org.apache.hadoop.hdfs.server.namenode.FSNamesystem: FSNamesystem initialization failed. org.apache.hadoop.hdfs.server.common.InconsistentFSStateException: Directory /tmp/hadoop-hadoop/dfs/name is in an inconsistent state: storage directory does not exist or is not accessible. at org.apache.hadoop.hdfs.server.namenode.FSImage.recoverTransitionRead(FSImage.java:303) at org.apache.hadoop.hdfs.server.namenode.FSDirectory.loadFSImage(FSDirectory.java:100) at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.initialize(FSNamesystem.java:388) at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.(FSNamesystem.java:362) at org.apache.hadoop.hdfs.server.namenode.NameNode.initialize(NameNode.java:276) at org.apache.hadoop.hdfs.server.namenode.NameNode.(NameNode.java:496) at org.apache.hadoop.hdfs.server.namenode.NameNode.createNameNode(NameNode.java:1279) at org.apache.hadoop.hdfs.server.namenode.NameNode.main(NameNode.java:1288) 2013-02-02 16:49:29,298 ERROR org.apache.hadoop.hdfs.server.namenode.NameNode: org.apache.hadoop.hdfs.server.common.InconsistentFSStateException: Directory /tmp/hadoop-hadoop/dfs/name is in an inconsistent state: storage directory does not exist or is not accessible. at org.apache.hadoop.hdfs.server.namenode.FSImage.recoverTransitionRead(FSImage.java:303) at org.apache.hadoop.hdfs.server.namenode.FSDirectory.loadFSImage(FSDirectory.java:100) at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.initialize(FSNamesystem.java:388) at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.(FSNamesystem.java:362) at org.apache.hadoop.hdfs.server.namenode.NameNode.initialize(NameNode.java:276) at org.apache.hadoop.hdfs.server.namenode.NameNode.(NameNode.java:496) at org.apache.hadoop.hdfs.server.namenode.NameNode.createNameNode(NameNode.java:1279) at org.apache.hadoop.hdfs.server.namenode.NameNode.main(NameNode.java:1288) 2013-02-02 16:49:29,299 INFO org.apache.hadoop.hdfs.server.namenode.NameNode: SHUTDOWN_MSG: /************************************************************ SHUTDOWN_MSG: Shutting down NameNode at hadoop-VirtualBox/127.0.1.1 ************************************************************/

    /tmp/hadoop-hadoop/dfs/name是一个临时的文件夹,系统每次重启时都会进行删除,在配置文件中进行修改就可。

    conf/core-site.xml

    <property>
       <name>hadoop.tmp.dir</name>
       <value>/home/javoft/Documents/hadoop/hadoop-${user.name}</value>
       <description>A base for other temporary directories.</description>
    </property>
    <value>的值根据自己的情况调整。

    重启hadoop

    bin/stop-all.sh
    bin/hadoop namenode -format
    bin/start-all.sh
    问题解决。namenode已经可以启动了。



    展开全文
  • Hadoop中NameNode节点起不来有一种原因可能是因为虚拟机linux的ip地址发生了改变 然后启动NameNode时出现了以下的错误 这个报出提示:No route to host ,找不到主机的路由,因为我的主机ip被更改成了192....

    Hadoop中NameNode节点起不来有一种原因可能是因为虚拟机linux因为更改网络的ip地址发生了改变


    然后启动NameNode时出现了以下的错误




    这个报出提示:No route to host    ,找不到主机的路由,因为我的主机ip因为是动态成了192.168.48.131,所以找不到主机路由


    因为一开始使用的是动态ip地址,会出现变化,所以改成静态并改回192.168.48.130的ip地址


    更改ip:在centos桌面右上角的图标上,右键修改。重启网卡,执行命令service network restart


    然后查看ifconfig




    恢复了192.168.48.130的ip地址


    再次启动NameNode节点


                  


    成功启动NameNode节点,解决了ip地址改变而出现NameNode不能起来的问题




    展开全文
  • 格式化NameNode之后,进程DataNode起不来了(起来一下,马上又关闭的现象). 我们看一下这是怎么回事呢.原因是你格式化之前没有删除data目录和logs目录. 2. 分析 没格式化之前: 没格式化之前data和name的clusterID是...
  • namenode启动起来

    千次阅读 2018-10-25 17:41:26
    报错信息如下 网上百度了也没找到对应的...然后我们将能够启动的namenode节点的tmp/dfs/name目录下面的文件拷贝到能启动的namenode节点上 /home/hadoop/data1/tmp/dfs/name [hadoop@xhh2 name]$ scp -r ./cur...
  • Namenode

    2017-07-13 17:00:35
    Namenode管理着文件系统的Namespace。它维护着文件系统树(filesystem tree)以及文件树中所有的文件和文件夹的元数据(metadata)。Namenode记录着每个文件中各个块所在的数据节点的位置信息,这些信息会在系统...
  • hadoop中namenode HA起不了的问题解决

    千次阅读 2017-07-16 11:19:21
    原先的自己的namenode HA的机器坏了,我就新加了一台机器作为namenodeHA,改了一些配置,还有配了一下免登陆,之后重启了一下集群,发现nn的HA没有起来
  • NameNode启动了问题

    2019-04-15 15:17:28
    报错:Encountered exception loading fsimage 原因分析:因为NameNode首次启动需要合并fsimage和edit,如果是首次启动报这个...记得初始化NameNode一定是-format -format -format,format能再tmp中初始化fsimage...
  • namenode总是启动

    千次阅读 2015-10-25 22:24:11
    启动hadoop后,用jps查看hadoop的守护进程发现namenode总是启动了。然后查看namenode的日志,出现下面的问题 ERROR org.apache.hadoop.hdfs.server.namenode.NameNode: org.apache.hadoop.hdfs.server.common....
  • 在Hadoop中NameNode 和 secondary NameNode是两个比较容易迷惑的知识,其实没有那么神秘NameNode 和 secondary NameNode就是两个进程 NameNode HDFS集群上有两类节点,一种是管理者一种是工作者,NameNode就是管理...
  • Hadoop NameNode

    2015-07-04 12:23:17
    初次使用Hadoop,运行后怎么没有NameNode节点? no jobtracker to stop 192.168.199.3: no tasktracker to stop 192.168.199.4: no tasktracker to stop no namenode to stop 192.168.199.4: no datanode to ...
  • Hadoop HDFS Namenode启动成功

    千次阅读 2014-09-11 11:25:23
    今天在Pseudodistributed mode下启动HDFS ...但是在试验向HDFS里拷贝文件时,发现出错,说没有找到namenode,用jps查看,有datanode和secondary namenode都启动起来了,但NameNode没有启动起来,用netst
  • Namenode dataNode 能启动

    千次阅读 2013-03-15 16:22:59
    Namenode 能启动 好像一般是因为重启之后没能启动,一般是因为hadoop.tmp.dir 设置在了/usr/tmp 下 而系统在reboot的时候会删除这些文件夹。所以把hadoop.tmp.dir设置在/home/下 或者其他系统重启不会删除的目录...
  • NameNode详解

    千次阅读 2018-11-08 09:32:17
    1、NameNode的功能 2、 NameNode 启动过程 3、 NameNode元数据管理 4、 安全模式 1、NameNode的功能 负责客户端请求的响应 元数据的管理(查询,修改) 2、 NameNode 启动过程 NameNode启动的时候...
  • 在将非HA的namenode转为 HA的配置过程中执行格式语句,启动的时候发现namenode起了,datanode没启动 hadoop namenode -format sbin/start-dfs.sh 1. 查看日志 hadoop/logs下 一般是由于namenode和datanode的...
  • Hadoop NameNode结点能启动

    千次阅读 2013-01-18 14:49:13
    2009-11-11 10:59:59,407 ERROR org.apache.hadoop.hdfs.server.namenode.FSNamesystem: FSNamesystem initialization failed. 2009-11-11 10:59:59,449 ERROR ...org.apache.hadoop.hdfs.server.namenode.NameNode
  • 对hadoop也太熟悉,也是慢慢摸索阶段 启动SecondaryNameNode 启动命令 hadoop-daemon.sh start secondarynamenode 然后执行jps发现没有启动起来, 去查看日志,发现了一个报错 Cannot use SecondaryNameNode in ...
  • ,如果namenode或者datanode没有起来,那么 cd~/bigdata/hadoop-2.7.7/logs rm * 然后重新复现之前的问题, ./dfs-start.sh --------------------------namenode故障--------------------------------------------...
  • 前几天把Hadoop玩坏了 重装了一次Hadoop 发现namenode启动了报错如下: java.io.IOException: Failed on local exception: java.net.SocketException: Unresolved address; Host Details : local host is: ...
  •   多次格式化namenode造成了namenode和datanode的clusterID一致!每次格式化时,namenode会更新clusterID,但是datanode只会在首次格式化时确定,因此就造成一致现象。 这里提供了两种解决办法: 1.打开core-...
  • Hadoop中namenode启动起来解决方法

    千次阅读 2020-04-14 23:47:54
    之前Hadoop集群都能启动成功,今天准备使用hive的时候发现Hadoop中的namenode 启动起来的,查看日志:2020-04-14 22:25:31,793 WARN org.apache.hadoop.hdfs.qjournal.client.QuorumJournalManager: Remote ...
  • 如果查看日志没有什么日常,且配置文件检查后没有问题:格式化namenode(bin/hdfs namenode -format),然后重新启动。
  • 【Hadoop 】NameNode启动起来的原因

    千次阅读 2019-12-29 00:24:41
    原因:每次namenode format会重新创建一个namenodeId,而tmp/dfs/data下包含了上次format下的id,namenode format清空了namenode下的数据,但是没有清空datanode下的数据,导致启动时失败,有两种解决方案: ...
  • hadoop namenode启动了怎么办?

    千次阅读 2018-01-04 14:02:47
    当你在学习和使用hadoop时,也许会遇到这样的一个问题,运行bin/start-all.sh时发现namenode没有启动,可以通过以下方法进行排查解决
  • ERROR namenode.NameNode: java.io.IOException: Cannot create directory /export/home/dfs/name/currentERROR namenode.NameNode: java.io.IOException: Cannot remove current directory: /usr/local/hadoop/hdfs
  • namemode启动之后shell没有报错,但使用jps明露并能看到namenode已经被启动。 问题解决 第一步:定位出错的原因。 可以通过分析hadoop的日志文件信息定位问题的发生原因。这里我们的问题是namenode启动异常,...
  • hadoop namenode不能启动原因

    千次阅读 2011-06-13 03:40:00
    hadoop namenode不能启动原因 症状: 9000端口没有监听,namenode 50030不能访问 解决:name 和data 文件夹不要自己建,并且在启动前使用hadoop namenode -format格式化

空空如也

空空如也

1 2 3 4 5 ... 20
收藏数 107,242
精华内容 42,896
关键字:

namenode起不来