400-650-7353
您所在的位置:首页 > IT干货资料 > 大数据 > 【大数据基础知识】Hadoop在HDFS客户端常用命令有哪些

【大数据基础知识】Hadoop在HDFS客户端常用命令有哪些

  • 发布: 大数据培训
  • 来源:大数据干货资料
  • 2020-03-19 00:45:50
  • 阅读()
  • 分享
  • 手机端入口

HDFS,是一种常用的分布式文件操作系统,要使用大数据,我们需要非常熟悉HDFS客户端操作,下面,我们一起来看下哦!

1. 查看hdfs中的目录和文件信息

hdfs fs -ls /hdfs路径

如:hdfs fs -ls /aaa/xxx/

hdfs fs -ls -R / #递归显示指定位置下的所有文件和文件夹

2. 上传文件到hdfs中

(1)hdfs fs -put test.txt /

(2)hdfs fs -copyFromLocal test.txt /test.txt.2

同时,在上传文件时,可以进行重命名。

(3)hdfs fs -moveFromLocal /本地文件 /hdfs路径

说明:使用最多的是put命令

3. 下载文件到客户端本地磁盘

hdfs fs -get /hdfs中的路径 /本地磁盘目录

hdfs fs -copyToLocal /hdfs中的路径 /本地磁盘路径 # 与get等价

如:

hdfs fs -get /test.txt.2

hdfs fs -copyToLocal /test.txt.2

其中,使用最多的就是get命令

4. 在hdfs中创建文件夹

hdfs fs -mkdir /aaa

hdfs fs -mkdir -p /bbb/xxx # 创建层级目录结构

hdfs fs -mkdir /{aa,bb} #同时创建多个目录

5. 拷贝文件

hdfs fs -cp /test.txt /bbb/

Hadoop之HDFS客户端常用命令怎么做?

6. 移动hdfs中的文件(或更名)

hdfs fs -mv /test.txt.2 /test.txt.3

hdfs fs -mv /test.txt.3 /bbb/test.txt.4

7. 删除hdfs中的文件或文件夹

hdfs fs -rm -r /aaa

8. 追加内容到已存在的文件

hdfs fs -appendToFile /本地文件 /hdfs中的文件

9. 显示文本文件的内容

hdfs fs -cat /test.txt

hdfs fs -tail /test.txt #显示文件末尾

10. 下载多个文件在本地生成一个合并文件

hdfs fs -getmerge /test/*.dat ./xx.dat

11. 修改文件的权限

hdfs fs -chown user:group /aaa

hdfs fs -chmod 700 /aaa

 

文章“【大数据基础知识】Hadoop在HDFS客户端常用命令有哪些”已帮助

>>本文地址:https://www.ujiuye.com/zhuanye/2020/48503.html

THE END  

声明:本站稿件版权均属中公教育优就业所有,未经许可不得擅自转载。

1 您的年龄

2 您的学历

3 您更想做哪个方向的工作?

获取测试结果
  • 大前端大前端
  • 大数据大数据
  • 互联网营销互联网营销
  • JavaJava
  • Linux云计算Linux
  • Python+人工智能Python
  • 嵌入式物联网嵌入式
  • 全域电商运营全域电商运营
  • 软件测试软件测试
  • 室内设计室内设计
  • 平面设计平面设计
  • 电商设计电商设计
  • 网页设计网页设计
  • 全链路UI/UE设计UI设计
  • VR/AR游戏开发VR/AR
  • 网络安全网络安全
  • 新媒体与短视频运营新媒体
  • 直播带货直播带货
  • 智能机器人软件开发智能机器人
 

快速通道fast track

近期开班时间TIME