Hadoop - 命令参考

虽然这里只演示了 **"$HADOOP_HOME/bin/hadoop fs"** 中的一些基本命令，但实际上它包含了更多命令。运行 ./bin/hadoop dfs 而不带任何额外参数将列出所有可以使用 FsShell 系统运行的命令。此外，如果您遇到问题，可以使用 **$HADOOP_HOME/bin/hadoop fs -help** 命令名称来查看相关操作的简要使用说明。

下面列出了所有操作的表格。以下约定用于参数：-

"<path>" means any file or directory name. 
"<path>..." means one or more file or directory names. 
"<file>" means any filename. 
"<src>" and "<dest>" are path names in a directed operation. 
"<localSrc>" and "<localDest>" are paths as above, but on the local file system.

所有其他文件和路径名都指的是 HDFS 中的对象。

序号	命令及描述
1	-ls <path> 列出指定路径目录的内容，显示每个条目的名称、权限、所有者、大小和修改日期。
2	-lsr <path> 类似于 -ls，但递归显示路径所有子目录中的条目。
3	-du <path> 显示与路径匹配的所有文件的磁盘使用情况（以字节为单位）；文件名将以完整的 HDFS 协议前缀报告。
4	-dus <path> 类似于 -du，但打印路径中所有文件/目录的磁盘使用情况摘要。
5	-mv <src><dest> 将由 src 指定的文件或目录移动到 HDFS 中的 dest。
6	-cp <src> <dest> 将由 src 标识的文件或目录复制到 HDFS 中的 dest。
7	-rm <path> 删除由路径标识的文件或空目录。
8	-rmr <path> 删除由路径标识的文件或目录。递归删除任何子条目（即路径的文件或子目录）。
9	-put <localSrc> <dest> 将本地文件系统中由 localSrc 标识的文件或目录复制到 DFS 中的 dest。
10	-copyFromLocal <localSrc> <dest> 与 -put 相同
11	-moveFromLocal <localSrc> <dest> 将本地文件系统中由 localSrc 标识的文件或目录复制到 HDFS 中的 dest，然后在成功后删除本地副本。
12	-get [-crc] <src> <localDest> 将 HDFS 中由 src 标识的文件或目录复制到由 localDest 标识的本地文件系统路径。
13	-getmerge <src> <localDest> 检索与 HDFS 中的路径 src 匹配的所有文件，并将它们复制到本地文件系统中由 localDest 标识的单个合并文件中。
14	-cat <filen-ame> 在标准输出上显示文件名的内容。
15	-copyToLocal <src> <localDest> 与 -get 相同
16	-moveToLocal <src> <localDest> 类似于 -get，但在成功后删除 HDFS 副本。
17	-mkdir <path> 在 HDFS 中创建名为 path 的目录。创建路径中缺少的任何父目录（例如，Linux 中的 mkdir -p）。
18	-setrep [-R] [-w] rep <path> 将由路径标识的文件的目标复制因子设置为 rep。（实际复制因子将随着时间的推移向目标移动）
19	-touchz <path> 在路径处创建一个文件，其中包含当前时间作为时间戳。如果路径处已存在文件，则失败，除非文件大小已为 0。
20	-test -[ezd] <path> 如果路径存在；长度为零；或为目录，则返回 1；否则返回 0。
21	-stat [format] <path> 打印有关路径的信息。格式是一个字符串，接受以块为单位的文件大小（%b）、文件名（%n）、块大小（%o）、复制（%r）和修改日期（%y、%Y）。
22	-tail [-f] <file2name> 在标准输出上显示文件的最后 1KB。
23	-chmod [-R] mode,mode,... <path>... 更改与由 path 标识的一个或多个对象关联的文件权限.... 使用 R 递归执行更改。mode 是一个 3 位八进制模式，或 {augo}+/-{rwxX}。假设如果未指定范围并且不应用 umask。
24	-chown [-R] [owner][:[group]] <path>... 设置由路径标识的文件或目录的所有者用户和/或组.... 如果指定 -R，则递归设置所有者。
25	-chgrp [-R] group <path>... 设置由路径标识的文件或目录的所有者组.... 如果指定 -R，则递归设置组。
26	-help <cmd-name> 返回上面列出的命令之一的使用信息。您必须省略 cmd 中的开头'-' 字符。

打印页面