大数据中HDFS常用shell和web界面有哪些
这篇文章将为大家详细讲解有关大数据中HDFS常用shell和web界面有哪些，小编觉得挺实用的，因此分享给大家做个参考，希望大家阅读完这篇文章后可以有所收获。
成都创新互联是一家专业提供深圳企业网站建设,专注与网站设计制作、成都网站制作、H5网站设计、小程序制作等业务。10年已为深圳众多企业、政府机构等服务。创新互联专业的建站公司优惠进行中。
大数据教程分享HDFS常用shell和web界面介绍
最后一个:块删除的开始时间
HDFS的Shell命令:
ps:无论看到是hdfs dfs 形式还是 hadoop fs这种形式 都可以 完成对HDFS的操作
1.向HDSF上传文件
put: 从本地文件系统赋值单个或多个原路径目标文件到HDFS文件系统中
hdfs dfs -put 本地文件路径 HDFS文件系统路径
2.将HDFS文件系统中的文件下载回来
get:从HDFS文件系统中将文件复制到本地文件系统中
hdfs dfs -get HDFS文件系统路径 本地文件系统路径
ps:HDFS有一个和put和get类似的而方法 copyFromlocal 相当于put 和 copyTolocal 相当于 get 3.查看HDFS文件系统中的文件内容
cat:查看HDFS文件系统中的文件内容
hdfs dfs -cat HDFS文件系统中文件的路径
ps:不要查看非文件
在查看文件的同时追加文件到本地路径
4.HDFS文件系统中进行复制操作
cp:将HDFS文件系统中的文件进行复制,复制到HDFS系统中
hdfs dfs -cp 源HDFS文件系统中的文件路径 目标HDFS文件系统中的路径
5.HDFS文件系统中的文件进行移动操作
mv:将源文件移动目标路径,这个命令可允许有多个源路径,此时目标路径必须是一个文件夹(目录)
不允许不同的文件系统互相移动文件
hdfs dfs -mv 源HDFS文件系统中的文件路径 目标HDFS文件系统中的路径
相当于剪切
6.查看HDFS文件系统中文件的大小
hdfs dfs -du HDFS文件系统中路径中的一个文件
7.在HDSF系统中创建文件夹
mkdir 创建文件夹
hdfs dfs -mkdir HDFS文件系统中的路径
创建多个文件夹 添加 -p 就是多个文件夹
8.查看HDFS文件系统下的所有文件
hdfs dfs -ls HDFS文件系统路径
9.删除HDFS文件系统中的目录或文件
ps:只能是单个文件 或 空目录
hdfs dfs -rm HDFS文件系统路径
若参数文件夹中有多个文件 加 -r
hdfs dfs -rm -r HDFS文件系统路径
10.更改文件的权限
r可读 w可写 x可执行
- | ---| --- 1代表有权 0代表没有权限 所有每三位可以作为一个八进制处理例如 rwx | rwx | rwx
111 | 111 | 111
=========================
7 7 7
hdfs dfs -chmod 权限值 HDFS文件系统路径若需要更改目录下权限都需要修改
hdfs dfs -chmod -R 权限值 HDFS文件系统路径下的文件夹ps:并且文件夹下的所有子文件和文件夹都会被修改
11.回收站
Hadoop回收站trash,默认是关闭的,建议开启
ps:默认为是没有权限操作回收站的,所以操作之前开启权限 hdfs dfs -chmod -R 777 HDFS文件系统中回收站的路径例子:hdfs dfs -chmod -R 777 /user
删除文件后,发现误删了,恢复文件
hdfs dfs -mv HDFS文件系统中回收站的路径下的文件 HDFS文件系统路径清空回收站 hdfs dfs -rm -r HDFS文件系统中回收站的路径
例如:hdfs dfs -rm -r /user/root/.Trash
关于“大数据中HDFS常用shell和web界面有哪些”这篇文章就分享到这里了，希望以上内容可以对大家有一定的帮助，使各位可以学到更多知识，如果觉得文章不错，请把它分享出去让更多的人看到。
本文标题：大数据中HDFS常用shell和web界面有哪些
分享路径：http://6mz.cn/article/gdiohj.html