千家信息网

HDFS常用命令有哪些

发表于:2025-02-01 作者:千家信息网编辑
千家信息网最后更新 2025年02月01日,本篇内容介绍了"HDFS常用命令有哪些"的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!HDFS命令有两
千家信息网最后更新 2025年02月01日HDFS常用命令有哪些

本篇内容介绍了"HDFS常用命令有哪些"的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!

  • HDFS命令有两种风格,均可使用,效果相同:

    • hadoop fs开头的

    • hdfs dfs开头的

  1. 如何查看hdfs或hadoop子命令的帮助信息,如ls子命令

hdfs dfs -help lshadoop fs -help ls #两个命令等价
  1. 查看hdfs文件系统中指定目录的文件列表。对比linux命令ls

hdfs dfs -ls /hadoop fs -ls /hdfs dfs -ls -R /

2、在hdfs文件系统中创建文件

hdfs dfs -touchz /edits.txthdfs dfs -ls /

3、向HDFS文件中追加内容

hadoop fs -appendToFile edit1.xml /edits.txt #将本地磁盘当前目录的edit1.xml内容追加到HDFS根目录 的edits.txt文

4、查看HDFS文件内容

hdfs dfs -cat /edits.txthdfs dfs -text /edits.txt

5、从本地路径上传文件至HDFS

#用法:hdfs dfs -put /本地路径 /hdfs路径hdfs dfs -put /linux本地磁盘文件 /hdfs路径文件hdfs dfs -copyFromLocal /linux本地磁盘文件 /hdfs路径文件  #跟put作用一样hdfs dfs -moveFromLocal /linux本地磁盘文件 /hdfs路径文件  #跟put作用一样,只不过,源文件被拷贝成功后,会被删除

6、在hdfs文件系统中下载文件

hdfs dfs -get /hdfs路径 /本地路径hdfs dfs -copyToLocal /hdfs路径 /本地路径  #根get作用一

7、在hdfs文件系统中下载文件

hdfs dfs -get /hdfs路径 /本地路径hdfs dfs -copyToLocal /hdfs路径 /本地路径  #根get作用一样

8、在hdfs文件系统中创建目录

hdfs dfs -mkdir /shell

9、在hdfs文件系统中删除文件

hdfs dfs -rm /edits.txt将文件彻底删除(被删除文件不放到hdfs的垃圾桶里)how?hdfs dfs -rm -skipTrash /xcall

10、在hdfs文件系统中修改文件名称(也可以用来移动文件到目录)

hdfs dfs -mv /xcall.sh /call.shhdfs dfs -mv /call.sh /shell

11、在hdfs中拷贝文件到目录

hdfs dfs -cp /xrsync.sh /shel
  • 许多命令与linux命令有很大的相似性,

  • 有用的==help==,如查看ls命令的使用说明:hadoop fs -help ls

  • 绝大多数的大数据框架的命令,也有类似的help信息

"HDFS常用命令有哪些"的内容就介绍到这里了,感谢大家的阅读。如果想了解更多行业相关的知识可以关注网站,小编将为大家输出更多高质量的实用文章!

0