Hadoop - 命令参考
"$HADOOP_HOME/bin/hadoop fs" 中的命令比此处演示的要多得多，尽管这些基本操作将帮助您入门。 运行不带附加参数的 ./bin/hadoop dfs 将列出所有可以与 FsShell 系统一起运行的命令。 此外，如果您遇到问题，$HADOOP_HOME/bin/hadoop fs -help commandName 将显示相关操作的简短使用摘要。
所有操作的表格如下所示。 参数使用以下约定 −
"<path>" means any file or directory name. "<path>..." means one or more file or directory names. "<file>" means any filename. "<src>" and "<dest>" are path names in a directed operation. "<localSrc>" and "<localDest>" are paths as above, but on the local file system.
所有其他文件和路径名都指的是 HDFS 中的对象。
| 序号 | 命令 & 描述 |
|---|---|
| 1 | -ls <path> 列出由路径指定的目录的内容，显示每个条目的名称、权限、所有者、大小和修改日期。 |
| 2 | -lsr <path> 行为类似于 -ls，但递归显示路径的所有子目录中的条目。 |
| 3 | -du <path> 显示所有匹配路径的文件的磁盘使用情况，以字节为单位； 文件名使用完整的 HDFS 协议前缀。 |
| 4 | -dus <path> 与 -du 类似，但打印路径中所有文件/目录的磁盘使用情况摘要。 |
| 5 | -mv <src><dest> 将 src 指示的文件或目录移动到 HDFS 中的 dest。 |
| 6 | -cp <src> <dest> 将 src 标识的文件或目录复制到 HDFS 中的 dest。 |
| 7 | -rm <path> 删除路径标识的文件或空目录。 |
| 8 | -rmr <path> 删除路径标识的文件或目录。 递归删除任何子条目（即路径的文件或子目录）。 |
| 9 | -put <localSrc> <dest> 将文件或目录从由 localSrc 标识的本地文件系统复制到 DFS 中的 dest。 |
| 10 | -copyFromLocal <localSrc> <dest> 等同于 -put |
| 11 | -moveFromLocal <localSrc> <dest> 将 localSrc 标识的本地文件系统中的文件或目录复制到 HDFS 内的 dest，然后在成功时删除本地副本。 |
| 12 | -get [-crc] <src> <localDest> 将HDFS中src标识的文件或目录复制到localDest标识的本地文件系统路径。 |
| 13 | -getmerge <src> <localDest> 检索与 HDFS 中路径 src 匹配的所有文件，并将它们复制到由 localDest 标识的本地文件系统中的单个合并文件。 |
| 14 | -cat <filen-ame> 在标准输出上显示文件名的内容。 |
| 15 | -copyToLocal <src> <localDest> 等同于 -get |
| 16 | -moveToLocal <src> <localDest> 与 -get 类似，但成功时会删除 HDFS 副本。 |
| 17 | -mkdir <path> 在 HDFS 中创建一个名为 path 的目录。 在路径中创建任何缺少的父目录（例如，Linux 中的 mkdir -p）。 |
| 18 | -setrep [-R] [-w] rep <path> 为 rep 的路径标识的文件设置目标复制因子。 （实际的复制因子会随着时间的推移向目标移动） |
| 19 | -touchz <path> 在包含当前时间的路径上创建一个文件作为时间戳。 如果文件已存在于路径中，则失败，除非该文件的大小已为 0。 |
| 20 | -test -[ezd] <path> 如果路径存在则返回 1；长度为零，或者是目录，返回 0。 |
| 21 | -stat [format] <path> 打印有关路径的信息。 格式是一个字符串，它接受块中的文件大小 (%b)、文件名 (%n)、块大小 (%o)、复制 (%r) 和修改日期 (%y, %Y)。 |
| 22 | -tail [-f] <file2name> 显示标准输出上最后 1KB 的文件。 |
| 23 | -chmod [-R] mode,mode,... <path>... 更改与路径标识的一个或多个对象关联的文件权限...。使用 R 递归执行更改。模式是 3 位八进制模式，或 {augo}+/-{rwxX}。 假设没有指定范围并且不应用 umask。 |
| 24 | -chown [-R] [owner][:[group]] <path>... 为路径标识的文件或目录设置拥有用户和/或组。如果指定了 -R，则递归设置所有者。 |
| 25 | -chgrp [-R] group <path>... 为路径标识的文件或目录设置所属组。如果指定了 -R，则递归设置组。 |
| 26 | -help <cmd-name> 返回上面列出的命令之一的使用信息。 您必须省略 cmd 中的前导 '-' 字符。 |
