精华内容
下载资源
问答
  • hadoop下载

    千次阅读 2018-09-28 18:24:18
    镜像地址下载: http://mirrors.hust.edu.cn/apache/
    展开全文
  • Windows系统Hadoop下载安装Hadoop下载Hadoop安装Hadoop环境配置Hadoop服务启动 Hadoop下载 官网下载地址:https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/ 请求官网下载地址,点击 hadoop-2.7.7 链接 ...

    Hadoop下载

    官网下载地址:https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/

    1. 请求官网下载地址,点击 hadoop-2.7.7 链接
      在这里插入图片描述
    2. 点击 hadoop-2.7.7.tar.gz 链接
      在这里插入图片描述
    3. 点击下载按钮进行下载
      在这里插入图片描述

    Hadoop安装

    1. 解压 hadoop-2.7.7.tar.gz
      在这里插入图片描述
    2. 解压 hadooponwindows-master.zip
      在这里插入图片描述
    3. 使用hadooponwindows-master的bin和etc替换hadoop2.7.7的bin和etc

    hadooponwindows-master.zip的下载地址:https://pan.baidu.com/s/1vxtBxJyu7HNmOhsdjLZkYw
    提取码:y9a4

    注意:官网下载Hadoop2.7.7,安装时注意,最好不要安装到带有空格的路径名下,例如:Programe Files,否则在配置Hadoop的配置文件时会找不到JDK(按相关说法,配置文件中的路径加引号即可解决,但我没测试成功)。

    Hadoop环境配置

    1. 安装JDK,设置环境变量。
    2. 配置HADOOP_HOME
      在这里插入图片描述
      path添加%HADOOP_HOME%\bin(win10不用分号或者如下编辑界面不用分号,其余加上;)
      在这里插入图片描述
    3. Hadoop中配置JDK。
      (1) 使用编辑器打开D:\ruanjian\hadoop-2.7.7\etc\hadoop\hadoop-env.cmd
      (2) 修改JAVA_HOME的路径
      把set JAVA_HOME改为jdk的位置
      注意其中PROGRA~1代表Program Files
      set JAVA_HOME=E:\PROGRA~1\Java\jdk1.8.0_171
      此处设置的JDK如下图:
      在这里插入图片描述
    4. 在D:\ruanjian\hadoop-2.7.7目录下,添加tmp文件夹
      在这里插入图片描述
    5. 在D:\ruanjian\hadoop-2.7.7目录下,添加data和namenode,datanode子文件夹
      在这里插入图片描述
    6. 打开 D:\ruanjian\hadoop-2.7.7\etc\hadoop\hdfs-site.xml, 修改路径为hadoop下的namenode和datanode
      在这里插入图片描述
    7. 把hadoop.dll 从D:\ruanjian\hadoop-2.7.7\bin拷贝到 C:\Windows\System32
      在这里插入图片描述
      在这里插入图片描述
      不然在window平台使用MapReduce测试时报错

    Hadoop服务启动

    1. 以管理员身份打开命令提示符,输入hdfs namenode -format,看到seccessfully就说明format成功
      在这里插入图片描述
      在这里插入图片描述
    2. 进入D:\ruanjian\hadoop-2.7.7\sbin目录下,执行 start-all 命令,启动hadoop集群。
      在这里插入图片描述
    3. 出现下面四个窗口表示启动hadoop集群成功
      在这里插入图片描述
      在这里插入图片描述
      在这里插入图片描述
      在这里插入图片描述
    4. 输入jps - 可以查看运行的所有节点
      在这里插入图片描述
    5. 访问http://localhost:50070,访问hadoop的web界面
      在这里插入图片描述
    6. 访问http://localhost:8088,访问yarn的web界面,有就表明已经成功
      在这里插入图片描述
    7. 执行stop-all,停止运行所有的节点
      在这里插入图片描述
    展开全文
  • 2.2 Hadoop下载与安装

    2018-11-25 10:36:07
    2.1 Hadoop下载与安装2.1.1 官网下载打开Apache Hadoop官方网址http://hadoop.apache.org/单击左侧菜单“Releases”将打开发行版页面http://hadoop.apache.org/releases.html单击2.7.3版本下“binary”链接,将进入....

    2.1 Hadoop下载与安装

    2.1.1 官网下载

    打开Apache Hadoop官方网址http://hadoop.apache.org/

    这里写图片描述

    单击左侧菜单“Releases”将打开发行版页面http://hadoop.apache.org/releases.html

    这里写图片描述

    单击2.7.3版本下“binary”链接,将进入该版本的下载页面 
    这里写图片描述
    单击最上方的建议链接: 
    We suggest the following mirror site for your download: 
    http://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/hadoop-2.7.3/hadoop-2.7.3.tar.gz

    可以使用迅雷或QQ旋风等多线程下载工具来下载,支持断点续传。成功下载后得到hadoop-2.7.3.tar.gz压缩文件,204M。请检查压缩包是否204M,浏览器下载的话可能会中断。

    2.1.2 上传至虚拟机

    这里写图片描述

    通过ll或ls命令可以查看到已经上传到虚拟机node1上的hadoop-2.7.3.tar.gz压缩文件

    这里写图片描述

    2.1.3 解压缩

    按照《1.7 目录规划》http://blog.csdn.net/chengyuqiang/article/details/71512953节规划,需要将Hadoop安装到/opt目录下。 
    通过下面命令直接将hadoop-2.7.3.tar.gz解压缩到/opt目录下 
    tar -zxvf hadoop-2.7.3.tar.gz -C /opt

    [root@node1 ~]# tar -zxvf hadoop-2.7.3.tar.gz -C /opt
    • 1

    这里写图片描述

    通过cd /opt/hadoop-2.7.3命令切换到hadoop根目录,然后通过ll命令查看

    这里写图片描述

    2.1.4 目录结构分析

    如上图Hadoop的目录结构:

    1. bin :Hadoop 最基本的管理脚本和使用脚本所在目录,这些脚本是sbin目录下管理脚本的基础实现,用户可以直接使用这些脚本管理和使用Hadoop 。
    2. etc :Hadoop 配置文件所在的目录,包括core-site.xml 、hdfs-site.xml 、mapred-site.xml 等从Hadoop 1.0 继承而来的配置文件和yarn-site.xml 等Hadoop 2.0 新增的配置文件。
    3. include :对外提供的编程库头文件(具体动态库和静态库在lib 目录中),这些头文件均是用C++ 定义的,通常用于C++ 程序访问HDFS 或者编写MapReduce 程序。
    4. lib :该目录包含了Hadoop 对外提供的编程动态库和静态库,与include目录中的头文件结合使用。
    5. libexec :各个服务对应的shell 配置文件所在目录,可用于配置日志输出目录、启动参数(比如JVM 参数)等基本信息。
    6. sbin :Hadoop 管理脚本所在目录,主要包含HDFS 和YARN 中各类服务的启动/ 关闭脚本。
    7. share :Hadoop 各个模块编译后的jar 包所在目录 。
    灰常灰常感谢原博主的辛苦工作,为防止删博,所以转载,只供学习使用,不做其他任何商业用途。
    展开全文
  • 2.1 Hadoop下载与安装2.1.1 官网下载打开Apache Hadoop官方网址http://hadoop.apache.org/单击左侧菜单“Releases”将打开发行版页面http://hadoop.apache.org/releases.html单击2.7.3版本下“binary”链接,将进入...

    2.1 Hadoop下载与安装

    2.1.1 官网下载

    打开Apache Hadoop官方网址http://hadoop.apache.org/

    这里写图片描述

    单击左侧菜单“Releases”将打开发行版页面http://hadoop.apache.org/releases.html

    这里写图片描述

    单击2.7.3版本下“binary”链接,将进入该版本的下载页面 
    这里写图片描述
    单击最上方的建议链接: 
    We suggest the following mirror site for your download: 
    http://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/hadoop-2.7.3/hadoop-2.7.3.tar.gz

    可以使用迅雷或QQ旋风等多线程下载工具来下载,支持断点续传。成功下载后得到hadoop-2.7.3.tar.gz压缩文件,204M。请检查压缩包是否204M,浏览器下载的话可能会中断。

    2.1.2 上传至虚拟机

    这里写图片描述

    通过ll或ls命令可以查看到已经上传到虚拟机node1上的hadoop-2.7.3.tar.gz压缩文件

    这里写图片描述

    2.1.3 解压缩

    按照《1.7 目录规划》http://blog.csdn.net/chengyuqiang/article/details/71512953节规划,需要将Hadoop安装到/opt目录下。 
    通过下面命令直接将hadoop-2.7.3.tar.gz解压缩到/opt目录下 
    tar -zxvf hadoop-2.7.3.tar.gz -C /opt

    [root@node1 ~]# tar -zxvf hadoop-2.7.3.tar.gz -C /opt

    这里写图片描述

    通过cd /opt/hadoop-2.7.3命令切换到hadoop根目录,然后通过ll命令查看

    这里写图片描述

    2.1.4 目录结构分析

    如上图Hadoop的目录结构:

    1. bin :Hadoop 最基本的管理脚本和使用脚本所在目录,这些脚本是sbin目录下管理脚本的基础实现,用户可以直接使用这些脚本管理和使用Hadoop 。
    2. etc :Hadoop 配置文件所在的目录,包括core-site.xml 、hdfs-site.xml 、mapred-site.xml 等从Hadoop 1.0 继承而来的配置文件和yarn-site.xml 等Hadoop 2.0 新增的配置文件。
    3. include :对外提供的编程库头文件(具体动态库和静态库在lib 目录中),这些头文件均是用C++ 定义的,通常用于C++ 程序访问HDFS 或者编写MapReduce 程序。
    4. lib :该目录包含了Hadoop 对外提供的编程动态库和静态库,与include目录中的头文件结合使用。
    5. libexec :各个服务对应的shell 配置文件所在目录,可用于配置日志输出目录、启动参数(比如JVM 参数)等基本信息。
    6. sbin :Hadoop 管理脚本所在目录,主要包含HDFS 和YARN 中各类服务的启动/ 关闭脚本。
    7. share :Hadoop 各个模块编译后的jar 包所在目录 。
    灰常灰常感谢原博主的辛苦工作,为防止删博,所以转载,只供学习使用,不做其他任何商业用途。
    展开全文
  • Hadoop下载安装及HDFS配置教程 前言 Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。Hadoop实现了一个...
  • Hadoop下载与安装

    2020-05-13 20:09:57
    安装Hadoop 介绍:Hadoop是一个开源软件框架,用于在商用硬件集群上存储数据和运行应用程序。它为任何类型的数据提供海量...① Hadoop-3.0.0下载 从http://archive.apache.org/dist/hadoop/core/下载Hadoop-3.0.0,下
  • hadoop下载地址与配置hadoop3.0集群

    千次阅读 2018-05-14 16:36:09
    hadoop版本下载访问地址:http://mirrors.hust.edu.cn/apache/hadoop/common搭建hadoop集群访问地址:https://blog.csdn.net/qq_32808045/article/details/762291571.准备(搭建集群所用到的软件及系统前期配置):...
  • 一、Hadoop下载 进入Apache官网提供的Hadoop下载页面,如下图所示: 选择要下载的Hadoop的版本,笔者在此下载的是hadoop-2.6.4版本,点击该版本进入如下页面: 下载红色方框标记的两个文件,下载成功后会得到如...
  • 超详细hadoop下载安装教程(附图文)

    万次阅读 多人点赞 2018-08-03 10:23:53
    在前几篇的文章中分别就虚拟系统安装、LINUX系统安装以及hadoop运行服务器的设置等内容写了详细的操作教程,本篇分享的是hadoop下载安装步骤。 在此之前有必要做一个简单的说明:分享的所有内容是以个人的操作...
  • CDH 版 Hadoop 下载

    千次阅读 2019-06-21 12:30:37
    -- 昨夜西风凋碧树,独上高楼,望尽天涯路 下载地址:http://archive.cloudera.com/cdh5/ 网页显示如下: 点击 cdh 目录,选择 5 ,进入如下页面,该页面...在该页面 Ctrl + f,搜索 Hadoop 相关的安装包: ...
  • CDH版本Hadoop下载

    千次阅读 2019-04-28 11:06:01
    下载地址:http://archive.cloudera.com/cdh5/cdh/5/你想下载得tgz包示例:http://archive.cloudera.com/cdh5/cdh/5/hadoop-2.6.0-cdh5.14.0.tar.gz建议:首先在 http://archive.cloudera.com/cdh5/cdh/5 版本库下...
  • Hadoop国内镜像下载地址:极速 下载地址:北京信息学院镜像http://mirror.bit.edu.cn/apache/hadoop/common/ 版本信息比较全,速度很快 请叫我雷锋!
  • 文章目录前言下载hadoop安装hadoop配置hadoophadoop-env.shyarn-env.shslaves更新*.xml配置文件core-site.xmlhdfs-site.xmlmapred-site.xmlyarn-site.xml将hadoop复制到slave1和slave1上修改slave上的hadoop-env.sh...
  • Hadoop下载和源码阅读

    千次阅读 2018-07-30 15:27:10
    访问官网:...点击下载hadoop-3.1.0.tar.gz 是320M,hadoop-3.1.0-src.tar.gz 是27M ---------------------------------------------------------------------------------------------...
  • Hadoop下载地址/hbase下载地址

    千次阅读 2018-05-28 12:42:18
    http://mirror.bit.edu.cn/apache/hadoop/common/http://archive.apache.org/dist/hbase/
  • https://archive.apache.org/dist/hadoop/common/

空空如也

空空如也

1 2 3 4 5 ... 20
收藏数 20,988
精华内容 8,395
关键字:

hadoop下载