精华内容
下载资源
问答
  • 1.start-all.sh开启线程hadoop fs -ls hdfs://cloud4:9000/user (cloud4表示主机名9000代表端口号/就代表根目录/user就是user... -ls/-lsr 查看目录下的文件信息hadoop fs -ls /查看根目录下文件与文件夹hadoop fs ...

    1.start-all.sh开启线程

    hadoop fs -ls hdfs://cloud4:9000/user (cloud4表示主机名9000代表端口号/就代表根目录/user就是user文件夹)

    hadoop fs -ls /user(hdfs://cloud4:9000可省略)

    2. -ls/-lsr 查看目录下的文件信息

    hadoop fs -ls /查看根目录下文件与文件夹

    hadoop fs -lsr /递归查看根目录下所有文件与文件夹

    hadoop fs -ls默认查看hdfs下的/user/例如:/user/root  (很方便的)

    3. –touchz 创建文件

    可以创建一个文件

    hadoop fs -touchz /hello  (创建一个hello文件)

    4. –mkdir 创建文件夹

    (linux中创建多级目录mkdir –p   p表示parents)

    可以创建一个或者多个文件夹(hadoop则不需要-p)

    hadoop fs -mkdir /user  (创建一个user文件夹)

    5. -text/-cat查看文件内容

    hadoop fs -text /hello

    hadoop fs -cat /hello

    6. -mv 移动/重命名

    该命令选项表示移动hdfs的文件到指定的hdfs目录中。后面跟两个路径,第一个表示源文件,第二个表示目的目录

    hadoop fs -mv /hello /user(文件到文件夹:是移动)

    hadoop fs -mv /hello /user/hello(文件到文件:是重命名)

    7. -cp 复制

    该命令选项表示复制hdfs指定的文件到指定的hdfs目录中。后面跟两个路径,第

    一个是被复制的文件,第二个是目的地

    hadoop fs -cp /user/hello /user/root

    8. -rm/-rmr 删除文件

    -rm:删除文件/空白文件夹

    该命令选项表示删除指定的文件或者空目录

    hadoop fs -rm /user/hello

    -rmr:递归删除

    该命令选项表示递归删除指定目录下的所有子目录和文件

    hadoop fs -rm /user

    9. -put 上传文件

    该命令选项表示把linux上的文件复制到hdfs中

    hadoop fs -put hadoop-env.sh /user

    将当前linux目录下的hadoop-env.sh文件,上传到/user(hdfs服务器上的user目录下)

    hadoop fs -put hadoop-env.sh  /你叫起的名字(hello—文件名)

    例如:hadoop fs -put hadoop-env.sh /hello

    10.-copyFromLocal 从本地复制

    用法与-put一样

    hadoop fs -copyFromLocal hadoop-env.sh /user

    11 -moveFromLocal从本地移动

    该命令表示把文件从linux上移动到hdfs中

    hadoop fs -moveFromLocal /home/repine/hehe.txt /user

    12. -getmerge 合并下载到本地

    该命令选项的含义是把hdfs指定目录下的所有文件内容合并到本地linux的文件中

    hadoop fs -getmerge /user /home/repine/abc.txt表示把user目录下所有文件内容复制到linux下/home/repine/abc.txt中

    13. -setrep/-setrep -R/-setrep -R -w 设置副本数量

    该命令选项是修改已保存文件的副本数量,后面跟副本数量,再跟文件路径

    hadoop fs -setrep 2 /user/hehe.txt设置/user/hehe.txt副本数量为2

    如果最后的路径表示文件夹,那么需要跟选项-R,表示对文件夹中的所有文件都修改副本

    hadoop fs -setrep -R 2 /user设置/user下所有文件(不是文件夹)的副本数量为2

    还有一个选项是-w,表示等待副本操作结束才退出命令

    hadoop fs -setrep -R -w 1 /user/hehe.txt

    39fc055e29d65e162fb81e4d6bc3b79a.png

    14. -du统计目录下个文件大小

    hadoop fs -du /查看根目录下的各个文件的大小

    hadoop fs -dus /汇总统计目录下所有文件的总大小(也就是当前文件夹的大小)

    15.-count统计文件(夹)数量

    hadoop fs -count /usr递归统计当前文件下的所有信息:数字代表(文件夹总数量、文件总数量、文件总大小信息)

    hadoop fs -lsr /usr验证信息

    16. –chmod/-chmod -R 修改文件权限

    该命令选项的使用类似于linux的shell中的chmod用法,作用是修改文件的权限

    hadoop fs - chmod 777 /user/hehe.txt修改该文件的权限

    如果加上选项-R,可以对文件夹中的所有文件修改权限

    hadoop fs – chmod -R 777 /user修改该文件夹下所有文件的权限

    17. hadoop jar 导jar在命令行运行

    //打包运行程序必备宝典

    job.setJarByClass(WordCountApp.class);

    在linux下 :

    hadoop jar    /linux下路径/XXX.jar     /hadoop执行jar的文件或者文件夹/hadoop下存放目录

    18、报告HDFS的基本统计信息

    bin/hadoop dfsadmin -report

    19、安全模式

    bin/hadoop dfsadmin -safemode leave/enter/get/wait

    20、将HDFS中的文件复制到本地系统中

    bin/hadoop dfs -get in getin

    将HDFS中的in文件复制到本地系统并命名为getin

    展开全文
  • hadoop常用文件命令

    2014-11-13 10:39:21
    * 文件操作  * 查看目录文件  * $ hadoop dfs -ls /user/cl  * ... * 删除文件  * $ hadoop dfs -rm /user/cl/temp/a.txt  *  * 删除目录与目录下所有文件  * $ hadoop dfs -rmr /u
    * 文件操作
     * 查看目录文件
     * $ hadoop dfs -ls /user/cl
     *
     * 创建文件目录
     * $ hadoop dfs -mkdir  [-p] /user/cl/temp
     *
     * 删除文件
     * $ hadoop dfs -rm /user/cl/temp/a.txt
     *
     * 删除目录与目录下所有文件
     * $ hadoop dfs -rmr /user/cl/temp
     *
     * 上传文件
     * 上传一个本机/home/cl/local.txt到hdfs中/user/cl/temp目录下
     * $ hadoop dfs -put /home/cl/local.txt /user/cl/temp
     *
     * 下载文件
     * 下载hdfs中/user/cl/temp目录下的hdfs.txt文件到本机/home/cl/中
     * $ hadoop dfs -get /user/cl/temp/hdfs.txt /home/cl
     *
     * 查看文件
     * $ hadoop dfs –cat /home/cl/hdfs.txt
     *
     * Job操作

     * 提交MapReduce Job, Hadoop所有的MapReduce Job都是一个jar包

     * $ hadoop jar <local-jar-file> <java-class> <hdfs-input-file> <hdfs-output-dir>

     * $ hadoop jar sandbox-mapred-0.0.20.jar sandbox.mapred.WordCountJob /user/cl/input.dat /user/cl/outputdir
     *
     * 杀死某个正在运行的Job
     * 假设Job_Id为:job_201207121738_0001
     * $ hadoop job -kill job_201207121738_0001
    展开全文
  • hadoop 删除文件、文件夹

    万次阅读 2018-09-03 15:32:46
    要从HDFS中删除文件,可以使用以下命令hadoop fs -rm -r -skipTrash /path_to_file/file_name 要从HDFS中删除文件夹,可以使用以下命令hadoop fs -rm -r -skipTrash /folder_name...

    要从HDFS中删除文件,可以使用以下命令:

    hadoop fs -rm -r -skipTrash /path_to_file/file_name

    要从HDFS中删除文件夹,可以使用以下命令:

    hadoop fs -rm -r -skipTrash /folder_name
    展开全文
  • Hadoop 文件命令

    千次阅读 2018-06-25 10:38:46
    Hadoop 文件命令* 文件操作 * 查看目录文件 * $ hadoop dfs -ls /user/cl * * 创建文件目录 * $ hadoop dfs -mkdir /user/cl/temp * * 删除文件 * $ hadoop dfs -rm /user/cl/temp/a.txt * * 删除目录与...

    Hadoop 文件命令

    * 文件操作
     * 查看目录文件
     * $ hadoop dfs -ls /user/cl
     *
     * 创建文件目录
     * $ hadoop dfs -mkdir /user/cl/temp
     *
     * 删除文件
     * $ hadoop dfs -rm /user/cl/temp/a.txt
     *
     * 删除目录与目录下所有文件
     * $ hadoop dfs -rmr /user/cl/temp
     *
     * 上传文件
     * 上传一个本机/home/cl/local.txthdfs/user/cl/temp目录下
     * $ hadoop dfs -put /home/cl/local.txt /user/cl/temp
     *
     * 下载文件
     * 下载hdfs/user/cl/temp目录下的hdfs.txt文件到本机/home/cl/
     * $ hadoop dfs -get /user/cl/temp/hdfs.txt /home/cl
     *
     * 查看文件
     * $ hadoop dfs –cat /home/cl/hdfs.txt
     *
     * Job操作

     * 提交MapReduce Job, Hadoop所有的MapReduce Job都是一个jar

     * $ hadoop jar <local-jar-file> <Java-class> <hdfs-input-file> <hdfs-output-dir>

     * $ hadoop jar sandbox-mapred-0.0.20.jar sandbox.mapred.WordCountJob /user/cl/input.dat /user/cl/outputdir
     *
     * 杀死某个正在运行的Job
     * 假设Job_Id为:job_201207121738_0001
     * $ hadoop job -kill job_201207121738_0001

     

    展开全文
  • 要从HDFS中删除文件,可以使用以下命令hadoop fs -rm -r -skipTrash /path_to_file/file_name 要从HDFS中删除文件夹,可以使用以下命令hadoop fs -rm -r -skipTrash /folder_name
  • hadoop文件操作命令

    2013-04-11 10:22:18
    以下操作是使用hdfs:hadoop用户/组运行,其实不必显示表达文件所在目录,hadoop会自动使用用户hdfs所在的目录。 * 文件操作  * 查看目录文件  * $ hadoop dfs -ls /user/cl ... * 删除文件  * $ hadoop dfs -rm
  • hadoop文件命令

    2015-05-21 14:21:14
    * 文件操作  * 查看目录文件  * $ hadoop dfs -ls /user/cl  * ... * 删除文件  * $ hadoop dfs -rm /user/cl/temp/a.txt  *  * 删除目录与目录下所有文件  * $ hadoop dfs -rmr /u
  • Hadoop 从HDFS中删除文件、文件夹命令

    万次阅读 2020-02-05 12:14:33
    Hadoop 从HDFS中删除文件命令hadoop fs -rm -r -skipTrash /path_to_file/file_name 例如: hadoop fs -rm -r -skipTrash /user/examples/src/main/resources/people.json Hadoop 从HDFS中删除文件夹命令...
  • Hadoop实现文件与文件夹的删除命令

    千次阅读 2019-05-23 12:36:53
    bin/hdfs dfs -rm -r /input //input为你要删除的文件夹,删除文件夹连同文件夹下的文件一起删除 文件删除 bin/hdfs dfs -rm -f /input/filename //filename 则是你要删除文件名字 ...
  • Hadoop常用shell命令

    2021-01-07 07:37:50
    显示当前目录结构 #显示当前目录结构 hadoop fs -ls [path] ...#删除文件 hadoop fs -rm [path] #递归删除目录和文件 hadoop fs -rm -R [path] 从本地加载文件到 HDFS #二选一执行即可 hadoop fs -put [localsrc]
  • Hadoop 文件命令 kill job

    万次阅读 2013-03-05 15:25:35
    * 文件操作  * 查看目录文件  * $ hadoop dfs -ls /user/cl  * ... * 删除文件  * $ hadoop dfs -rm /user/cl/temp/a.txt  *  * 删除目录与目录下所有文件  * $ hadoop dfs -rmr /u
  • Hadoop基本操作命令

    2019-09-26 08:48:34
    Hadoop基本操作命令 #hadoop dfsadmin -report 查看hdfs集群的存储空间使用情况。 #hadoop fs -du-h 目录 查看当前目录下各个文件占得内存 #hadoop fs –rmr /tmp/aaa删除一个目录 #hadoop fs –put文件 ...
  • Hadoop的基础命令

    2019-06-07 17:41:00
    首次使用Hadoop时,格式化文件系统命令:hdfs namenode -format 启动HDFS:start-dfs.sh 启动YARN:start-all.sh start-all.sh等价于start-dfs.sh + start-... 删除文件hadoop fs -rm -r /program_output/Word...
  • 文件操作  * 查看目录文件  * $ hadoop dfs -ls /user/cl  * ... * 删除文件  * $ hadoop dfs -rm /user/cl/temp/a.txt  *  * 删除目录与目录下所有文件  * $ hadoop dfs -rmr /use
  • Hadoop之基本命令

    2020-12-17 14:18:37
    今天来点基本命令吧,事无巨细统统拿下,O(∩_∩)O哈哈~ 命令 ...删除指定目录的指定文件 hadoop fs -rmdir 删除目录,该目录必须为空目录 hadoop fs -rmr 删除目录,目录可有文件 hadoop fs
  • hadoop命令fsck命令

    2016-08-10 17:23:00
    在HDFS中,提供了fsck命令,用于检查HDFS上文件和目录的健康状态、获取...-delete: 删除损坏的文件 -openforwrite: 输出检测中的正在被写的文件 -list-corruptfileblocks: 输出损坏的块及其所属的文件 -fil...
  • hadoop常用基本命令

    2019-04-29 10:59:01
    hdfs文件的相关操作主要使用hadoop fs、hadoop dfs、hdfs dfs 命令,以下对最常用的相关命令进行简要说明。...hadoop fs -rm 删除文件,-rm -R 递归删除目录和文件 hadoop fs -put [localsrc] [dst]...
  • Hadoop】常用命令

    2021-04-08 21:36:42
    常用命令查看指定内容打开某个已存在文件将本地文件存储至hadoophadoop上某个文件down至本地已有目录下删除hadoop上指定文件删除hadoop上指定文件夹(包含子目录等)在hadoop指定目录内创建新目录在hadoop指定目录...
  • 要从HDFS中删除文件,可以使用以下命令hadoop fs -rm -r -skipTrash /path_to_file/file_name 要从HDFS中删除文件夹,可以使用以下命令hadoop fs -rm -r -skipTrash /folder_name ...
  • Hadoop集群常用命令

    2019-01-24 09:40:09
    hadoop 上传文件 hadoop fs -put a.txt /a/b 下载文件 hadoop fs -get /a/b/* ./ ...递归删除文件夹 hadoop fs -rm -r /a/b 分屏查看 hadoop fs -cat /a/b/* | more 统计文件行数 hadoop fs -cat /a* ...
  • Hadoop - HDFS 命令

    2018-05-26 16:20:27
       如下是常用的HDFS命令,用于上传文件删除HDFS上的目录、启动一个作业等操作。 一、hadoop命令 1.1 hadoop fs    hadoop fs 系列指令是对HFDS文件系统的操作,类似于linux文件系统的操作,比如查看目录...
  • * 文件操作  * 查看目录文件  * $ hadoop dfs -ls /user/cl  * ... * 删除文件  * $ hadoop dfs -rm /user/cl/temp/a.txt  *  * 删除目录与目录下所有文件  * $ hadoop dfs -rmr /u

空空如也

空空如也

1 2 3 4 5 ... 20
收藏数 725
精华内容 290
关键字:

hadoop删除文件命令