温馨提示×

温馨提示×

您好,登录后才能下订单哦!

密码登录×
登录注册×
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》

HDFS常用命令有哪些

发布时间:2021-07-21 09:29:51 来源:亿速云 阅读:156 作者:chen 栏目:大数据

本篇内容介绍了“HDFS常用命令有哪些”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!

  • HDFS命令有两种风格,均可使用,效果相同:

    • hadoop fs开头的

    • hdfs dfs开头的

  1. 如何查看hdfs或hadoop子命令的帮助信息,如ls子命令

hdfs dfs -help lshadoop fs -help ls #两个命令等价
  1. 查看hdfs文件系统中指定目录的文件列表。对比linux命令ls

hdfs dfs -ls /hadoop fs -ls /hdfs dfs -ls -R /

2、在hdfs文件系统中创建文件

hdfs dfs -touchz /edits.txthdfs dfs -ls /

3、向HDFS文件中追加内容

hadoop fs -appendToFile edit1.xml /edits.txt #将本地磁盘当前目录的edit1.xml内容追加到HDFS根目录 的edits.txt文

4、查看HDFS文件内容

hdfs dfs -cat /edits.txthdfs dfs -text /edits.txt

5、从本地路径上传文件至HDFS

#用法:hdfs dfs -put /本地路径 /hdfs路径hdfs dfs -put /linux本地磁盘文件 /hdfs路径文件hdfs dfs -copyFromLocal /linux本地磁盘文件 /hdfs路径文件  #跟put作用一样hdfs dfs -moveFromLocal /linux本地磁盘文件 /hdfs路径文件  #跟put作用一样,只不过,源文件被拷贝成功后,会被删除

6、在hdfs文件系统中下载文件

hdfs dfs -get /hdfs路径 /本地路径hdfs dfs -copyToLocal /hdfs路径 /本地路径  #根get作用一

7、在hdfs文件系统中下载文件

hdfs dfs -get /hdfs路径 /本地路径hdfs dfs -copyToLocal /hdfs路径 /本地路径  #根get作用一样

8、在hdfs文件系统中创建目录

hdfs dfs -mkdir /shell

9、在hdfs文件系统中删除文件

hdfs dfs -rm /edits.txt将文件彻底删除(被删除文件不放到hdfs的垃圾桶里)how?hdfs dfs -rm -skipTrash /xcall

10、在hdfs文件系统中修改文件名称(也可以用来移动文件到目录)

hdfs dfs -mv /xcall.sh /call.shhdfs dfs -mv /call.sh /shell

11、在hdfs中拷贝文件到目录

hdfs dfs -cp /xrsync.sh /shel
  • 许多命令与linux命令有很大的相似性,

  • 有用的==help==,如查看ls命令的使用说明:hadoop fs -help ls

  • 绝大多数的大数据框架的命令,也有类似的help信息

“HDFS常用命令有哪些”的内容就介绍到这里了,感谢大家的阅读。如果想了解更多行业相关的知识可以关注亿速云网站,小编将为大家输出更多高质量的实用文章!

向AI问一下细节

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

AI