HDFS文件操作命令手册

HDFS文件操作的基本格式是：

bin/hadoop dfs -cmd <args>

1. cat

$ hadoop dfs -cat URI [URI …] 
#将参数所指示的文件的内容输出到stdout 

#example:
$ hadoop dfs -cat file:///file2 /user/hadoop/file4

2.cp

$ hadoop dfs -cp URI [URI …] <dest>
#将文件拷贝到目标路径中。如果 <dest>为目录的话，可以将多个文件拷贝到该目录下

#example:
$ hadoop dfs -cp /user/hadoop/file1 /user/hadoop/file2 /user/hadoop/dir

3.get

$ hadoop dfs -get [-ignorecrc] [-crc] <src><localdst>
#将文件拷贝到本地文件系统

#example：
$ hadoop dfs -get /user/hadoop/file localfile

4.ls

$ hadoop dfs -ls <args>
#对于一个文件，该命令返回的文件状态以如下格式列出：
#文件权限、副本个数、用户ID、组ID、文件大小、最近一次修改日期、最近一次修改时间、文件名
#对于一个目录，结果格式：
#文件权限，用户ID，组ID，最近一次修改日期，最近一次修改时间，文件名

#example：
$ hadoop dfs -ls /user/hadoop/file1

5.lsr

$ hadoop dfs -lsr <args>
#在整个目录下递归执行ls

6.mkdir

$ hadoop dfs -mkdir <paths>
#以<paths>中的URI作为参数，创建目录

#example：
$ hadoop dfs -mkdir /user/hadoop/dir1 /user/hadoop/dir2

7.put

$ hadoop dfs -put <localsrc> … <dst>
#将单个的源文件src或者多个源文件从本地文件系统拷贝到目标文件系统中。

#example：
$ hadoop dfs -put localfile1 localfile2 /user/hadoop/hadoopdir

8.rm

$ hadoop dfs -rm [-skipTrash] URI [URI …]
#删除参数指定的文件，参数可以有多个。只删除文件和非空目录。如果指定了-skipTrash选项，那么在回收站可用的情况下，跳过回收站而直接将文件删除

#example：
$ hadoop dfs -rm hdfs://nn.example.com/file /user/hadoop/emptydir

9.rmr

$ hadoop dfs -rmr [-skipTrash] URI [URI …]
#删除操作的递归版本，即递归删除所有子目录下的文件

#example：
$ hadoop dfs -rmr /user/hadoop/dir