Hadoop – 命令参考

Hadoop – 命令参考


还有很多更多的命令“$ HADOOP_HOME /斌/ Hadoop的FS”不是在这里表现出来,虽然这些基本的操作都将让你开始。不带附加参数运行 ./bin/hadoop dfs 将列出可以使用 FsShell 系统运行的所有命令。此外,如果您遇到困难$HADOOP_HOME/bin/hadoop fs -help commandName 将显示相关操作的简短使用摘要。

所有操作的表格如下所示。以下约定用于参数 –

"<path>" means any file or directory name. 
"<path>..." means one or more file or directory names. 
"<file>" means any filename. 
"<src>" and "<dest>" are path names in a directed operation. 
"<localSrc>" and "<localDest>" are paths as above, but on the local file system. 

所有其他文件和路径名都是指 HDFS 中的对象。

Sr.No 命令和描述
1

-ls <path>

列出由路径指定的目录的内容,显示每个条目的名称、权限、所有者、大小和修改日期。

2

-lsr <path>

行为类似于 -ls,但递归地显示路径的所有子目录中的条目。

3

-du <path>

以字节为单位显示所有匹配路径的文件的磁盘使用情况;文件名以完整的 HDFS 协议前缀报告。

4

-dus <path>

类似于 -du,但会打印路径中所有文件/目录的磁盘使用情况摘要。

5

-mv <src><dest>

将 src 指示的文件或目录移动到 HDFS 中的 dest。

6

-cp <src> <dest>

将 src 标识的文件或目录复制到 HDFS 中的 dest。

7

-rm <path>

删除由路径标识的文件或空目录。

8

-rmr <path>

删除由路径标识的文件或目录。递归删除任何子条目(即路径的文件或子目录)。

9

-put <localSrc> <dest>

将文件或目录从 localSrc 标识的本地文件系统复制到 DFS 中的 dest。

10

-copyFromLocal <localSrc> <dest>

与 -put 相同

11

-moveFromLocal <localSrc> <dest>

将文件或目录从 localSrc 标识的本地文件系统复制到 HDFS 中的 dest,然后在成功时删除本地副本。

12

-get [-crc] <src> <localDest>

将 src 标识的 HDFS 中的文件或目录复制到 localDest 标识的本地文件系统路径。

13

-getmerge <src> <localDest>

检索与 HDFS 中的路径 src 匹配的所有文件,并将它们复制到 localDest 标识的本地文件系统中的单个合并文件。

14

-cat <filen-ame>

在标准输出上显示文件名的内容。

15

-copyToLocal <src> <localDest>

与 -get 相同

16

-moveToLocal <src> <localDest>

像 -get 一样工作,但在成功时删除 HDFS 副本。

17

-mkdir <path>

在 HDFS 中创建一个名为 path 的目录。

在路径中创建任何缺失的父目录(例如,Linux 中的 mkdir -p)。

18

-setrep [-R] [-w] rep <path>

将路径标识的文件的目标复制因子设置为 rep。(实际复制因子会随着时间的推移向目标移动)

19

-touchz <path>

在包含当前时间作为时间戳的路径上创建一个文件。如果文件已存在于路径中,则失败,除非文件大小已为 0。

20

-test -[ezd] <path>

如果路径存在则返回 1;长度为零;或者是一个目录或者 0 否则。

21

-stat [format] <path>

打印有关路径的信息。格式是一个字符串,它接受以块为单位的文件大小 (%b)、文件名 (%n)、块大小 (%o)、复制 (%r) 和修改日期 (%y, %Y)。

22

-tail [-f] <file2name>

显示标准输出上的最后 1KB 文件。

23

-chmod [-R] mode,mode,… <path>…

更改与路径标识的一个或多个对象关联的文件权限…。使用 R 递归执行更改。模式是 3 位八进制模式,或 {augo}+/-{rwxX}。假设没有指定范围并且不应用 umask。

24

-chown [-R] [owner][:[group]] <path>…

为由路径标识的文件或目录设置所有者用户和/或组…。如果指定了 -R,则递归设置所有者。

25

-chgrp [-R] group <path>…

为由路径标识的文件或目录设置所属组…。如果指定了 -R,则递归设置组。

26

-help <cmd-name>

返回上面列出的命令之一的使用信息。您必须省略 cmd 中的前导“-”字符。

觉得文章有用?

点个广告表达一下你的爱意吧 !😁