HDFS文件操作命令手册

HDFS文件操作的基本格式是：

 bin/hadoop dfs -cmd <args>

1. cat

 $ hadoop dfs -cat URI [URI …]
 #将参数所指示的文件的内容输出到stdout 

 #example:
 $ hadoop dfs -cat file:///file2 /user/hadoop/file4

2.cp

 $ hadoop dfs -cp URI [URI …] <dest>
 #将文件拷贝到目标路径中。如果 <dest>为目录的话，可以将多个文件拷贝到该目录下

 #example:
 $ hadoop dfs -cp /user/hadoop/file1 /user/hadoop/file2 /user/hadoop/dir

3.get

 $ hadoop dfs -get [-ignorecrc] [-crc] <src><localdst>
 #将文件拷贝到本地文件系统

 #example：
 $ hadoop dfs -get /user/hadoop/file localfile

4.ls

 $ hadoop dfs -ls <args>
 #对于一个文件，该命令返回的文件状态以如下格式列出：
 #文件权限、副本个数、用户ID、组ID、文件大小、最近一次修改日期、最近一次修改时间、文件名
 #对于一个目录，结果格式：
 #文件权限，用户ID，组ID，最近一次修改日期，最近一次修改时间，文件名

 #example：
 $ hadoop dfs -ls /user/hadoop/file1

5.lsr

 $ hadoop dfs -lsr <args>
 #在整个目录下递归执行ls

6.mkdir

 $ hadoop dfs -mkdir <paths>
 #以<paths>中的URI作为参数，创建目录

 #example：
 $ hadoop dfs -mkdir /user/hadoop/dir1 /user/hadoop/dir2

7.put

 $ hadoop dfs -put <localsrc> … <dst>
 #将单个的源文件src或者多个源文件从本地文件系统拷贝到目标文件系统中。

 #example：
 $ hadoop dfs -put localfile1 localfile2 /user/hadoop/hadoopdir

8.rm

 $ hadoop dfs -rm [-skipTrash] URI [URI …]
 #删除参数指定的文件，参数可以有多个。只删除文件和非空目录。如果指定了-skipTrash选项，那么在回收站可用的情况下，跳过回收站而直接将文件删除

 #example：
 $ hadoop dfs -rm hdfs://nn.example.com/file /user/hadoop/emptydir

9.rmr

 $ hadoop dfs -rmr [-skipTrash] URI [URI …]
 #删除操作的递归版本，即递归删除所有子目录下的文件

 #example：
 $ hadoop dfs -rmr /user/hadoop/dir