admin 管理员组文章数量: 887817
2024年2月21日发(作者:下载游戏)
Shell在计算机科学中俗称“壳”,给使用者使用界面的进行与系统交互的软件,通过接收用户输入的命令执行相应的操作,Shell分为图形界面Shell和命令行式Shell。
HDFSShell包含类似Shell的命令,示例如下:
hadoopfs
hadoopdfs
hdfsdfs
上述命令中,“hadoopfs”使用面最广,可以操作任何文件系统,如本地系统、HDFS等,“hadoopdfs”则主要针对HDFS文件系统,已经被“hdfsdfs”代替。
文件系统(FS)Shell包含了各种的类shell的命令,可以直接与Hadoop分布式文件系统以及其他文件系统进行交互,如与LocalFS、HTTPFS、S3FS文件系统交互等。通过命令行的进行交互,具体操作常用命令,如表1所示。
表1HDFSShell参数
命令参数 功能描述
-ls
-du
-mv
-cp
-rm
-put
-cat
-text
-mkdir
-help
查看指定路径的目录结构
统计目录下所有文件小
文件
复制文件
删除文件/空白文件夹
上传文件
查看文件内容
将源文件输出为文本格式
创建空白文件夹
帮助
从表3-1可以看出,HDFS支持的命令行很多,但这里只列举常用的一部分,如果需要了解全部命令或使用过程中遇到问题都可以使用“hadoopfs–help”命令获取帮助文档,也可以通过Hadoop文档:/docs/stable/hadoop-project-dist/hadoop-mon/学习,接下来对这些常用的命令进行操作演示。
1.ls命令
ls命令用于查看指定路径的当前目录结构,类似于Linux系统中的ls命令,其语法格式如下:
1
hadoopfs–ls[-d][-h][-R]
其中,各项参数说明如下:
l-d:将目录显示为普通文件。
l-h:使用便于操作人员读取的单位信息格式。
l-R:递归显示所有子目录的信息。
示例代码如下:
$hadoopfs-ls/
上述示例代码,执行完成后会展示HDFS根目录下的所有文件及文件夹,如图1所示。
图1ls命令
2.mkdir命令
mkdir命令用于在指定路径下创建子目录,其中创建的路径可以采用URI格式进行指定,与Linux命令mkdir相同,可以创建多级目录,其语法格式如下:
hadoopfs–mkdir[-p]
其中-p参数表示创建子目录使先检查路径否存在,如果不存在,则创建相应的各级目录。
示例代码如下:
$hadoopfs-mkdir-p/itcast/hadoop
上述示例代码,在HDFS系统的根目录下创建“itcast/hadoop”层级文件夹,“-p”参数表示递归创建路径中的各级目录。执行命令后如图2所示。
2
图2mkdir命令
3.put命令
put命令用于将本地系统的文件或文件夹复制到HDFS系统上去,其语法格式如下:
hadoopfs-put[-f][-p]
其中各项说明如下:
-f:覆盖目标文件-p:保留访问和时间、权限
示例代码如下:
$/
上述指令执行成功后查询HDFS根目录如图3所示。
图3put命令
3
版权声明:本文标题:什么是HDFS Shell?HDFS常用命令操作方法 内容由网友自发贡献,该文观点仅代表作者本人, 转载请联系作者并注明出处:http://www.freenas.com.cn/free/1708445245h524439.html, 本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容,一经查实,本站将立刻删除。
发表评论