hdfs文件的相关操作主要使用hadoop fs、hadoop dfs、hdfs dfs 命令,以下对最常用的相关命令进行简要说明。 
hadoop fs -ls  显示当前目录结构,-ls -R 递归显示目录结构 
hadoop fs -mkdir  创建目录 
hadoop fs -rm   删除文件,-rm -R 递归删除目录和文件 
hadoop fs -put  [localsrc] [dst]  从本地加载文件到HDFS 
hadoop fs -get  [dst] [localsrc]  从HDFS导出文件到本地 
hadoop fs - copyFromLocal [localsrc] [dst]  从本地加载文件到HDFS,与put一致 
hadoop fs -copyToLocal [dst] [localsrc]  从HDFS导出文件到本地,与get一致 
hadoop fs -test -e  检测目录和文件是否存在,存在返回值$?为0,不存在返回1 
hadoop fs -text  查看文件内容 
hadoop fs -du  统计目录下各文件大小,单位字节。-du -s 汇总目录下文件大小,-du -h 显示单位 
hadoop fs -tail  显示文件末尾 
hadoop fs -cp [src] [dst] 从源目录复制文件到目标目录

hadoop fs -mv [src] [dst] 从源目录移动文件到目标目录

下面的对上面命令的操作演示

1,hadoop fs -ls  显示当前目录结构,-ls -R 递归显示目录结构

hdfs文件的相关操作主要使用hadoop fs、hadoop dfs、hdfs dfs 命令,以下对最常用的相关命令进行简要说明。 
hadoop fs -ls  显示当前目录结构,-ls -R 递归显示目录结构 
hadoop fs -mkdir  创建目录 
hadoop fs -rm   删除文件,-rm -R 递归删除目录和文件 
hadoop fs -put  [localsrc] [dst]  从本地加载文件到HDFS 
hadoop fs -get  [dst] [localsrc]  从HDFS导出文件到本地 
hadoop fs - copyFromLocal [localsrc] [dst]  从本地加载文件到HDFS,与put一致 
hadoop fs -copyToLocal [dst] [localsrc]  从HDFS导出文件到本地,与get一致 
hadoop fs -test -e  检测目录和文件是否存在,存在返回值$?为0,不存在返回1 
hadoop fs -text  查看文件内容 
hadoop fs -du  统计目录下各文件大小,单位字节。-du -s 汇总目录下文件大小,-du -h 显示单位 
hadoop fs -tail  显示文件末尾 
hadoop fs -cp [src] [dst] 从源目录复制文件到目标目录

hadoop fs -mv [src] [dst] 从源目录移动文件到目标目录

下面的对上面命令的操作演示

1,hadoop fs -ls  显示当前目录结构,-ls -R 递归显示目录结构

2,hadoop fs -mkdir  创建目录

3,hadoop fs -rm   删除文件,-rm -R 递归删除目录和文件

4,hadoop fs -put  [localsrc] [dst]  从本地加载文件到HDFS

5,hadoop fs -get  [dst] [localsrc]  从HDFS导出文件到本地

6,hadoop fs - copyFromLocal [localsrc] [dst]  从本地加载文件到HDFS,与put一致

7,hadoop fs -copyToLocal [dst] [localsrc]  从HDFS导出文件到本地,与get一致

8,hadoop fs -test -e  检测目录和文件是否存在,存在返回值$?为0,不存在返回1

9,hadoop fs -text  查看文件内容

10,hadoop fs -du  统计目录下各文件大小,单位字节。-du -s 汇总目录下文件大小,-du -h 显示单位

11,hadoop fs -tail  显示文件末尾

12,hadoop fs -cp [src] [dst] 从源目录复制文件到目标目录

13,hadoop fs -mv [src] [dst] 从源目录移动文件到目标目录

hdfs基本操作命令的更多相关文章

  1. 简单hdfs相关操作命令

    HDFS常用操作命令 启动hdfs #start-all.sh 查看hdfs的配置文件 #cat hdfs-site.sh #hadoop fs -put /soft/jdk / #HDFS上传文件命 ...

  2. HDFS常用操作命令

    启动hdfs#start-all.sh查看hdfs的配置文件#cat hdfs-site.sh#hadoop fs -put /soft/jdk /#HDFS上传文件命令查看上传后的文件属性#hado ...

  3. Hadoop HDFS常用操作命令

    hadoop常用命令:hadoop fs查看Hadoop HDFS支持的所有命令 hadoop fs –ls列出目录及文件信息 hadoop fs –lsr循环列出目录.子目录及文件信息 hadoop ...

  4. HDFS文件操作命令手册

    HDFS文件操作的基本格式是: bin/hadoop dfs -cmd <args> 1. cat $ hadoop dfs -cat URI [URI …] #将参数所指示的文件的内容输 ...

  5. Hadoop框架之HDFS的shell操作

    既然HDFS是存取数据的分布式文件系统,那么对HDFS的操作,就是文件系统的基本操作,比如文件的创建.修改.删除.修改权限等,文件夹的创建.删除.重命名等.对HDFS的操作命令类似于Linux的she ...

  6. Hadoop开发第6期---HDFS的shell操作

    一.HDFS的shell命令简介 我们都知道HDFS 是存取数据的分布式文件系统,那么对HDFS 的操作,就是文件系统的基本操作,比如文件的创建.修改.删除.修改权限等,文件夹的创建.删除.重命名等. ...

  7. (第3篇)HDFS是什么?HDFS适合做什么?我们应该怎样操作HDFS系统?

    摘要: 这篇文章会详细介绍HDFS是什么,HDFS的作用,适合和不适合的场景,我们该如何操作HDFS?   HDFS文件系统 Hadoop 附带了一个名为 HDFS(Hadoop分布式文件系统)的分布 ...

  8. HDFS命令实现分析

    HDFS命令概述 HDFS命令涉及两类,一类是hadoop命令,一类是hdfs命令,功能也分为两类,第一类是HDFS文件操作命令,第二类是HDFS管理命令. 二者都是shell命令,真正的命令只有ha ...

  9. HDFS文件系统

    Hadoop 附带了一个名为 HDFS(Hadoop分布式文件系统)的分布式文件系统,专门存储超大数据文件,为整个Hadoop生态圈提供了基础的存储服务. 本章内容: 1) HDFS文件系统的特点,以 ...

随机推荐

  1. ms sql 带自增列 带外键约束 数据导入导出

    1,生成建表脚本 选中要导的表,点右键-编写表脚本为-create到  ,生成建表脚本 2,建表(在新库),但不建外键关系 不要选中生成外键的那部分代码,只选择建表的代码 3,导数据,用SQL STU ...

  2. awk的执行方式

    https://blog.csdn.net/fengyuanye/article/details/82858863 awk执行有三种形式: 1.直接以命令行来执行,        语法形式为:awk  ...

  3. Nginx总结(九)Nginx服务器高性能优化的配置--轻松实现10万并发访问量

    前面讲了如何配置Nginx虚拟主机,如何配置服务日志等很多基础的内容,大家可以去这里看看nginx系列文章:https://www.cnblogs.com/zhangweizhong/category ...

  4. mysql 复合索引 为什么遵循最左原则

    1,>mysql :多列索引  https://dev.mysql.com/doc/refman/5.7/en/multiple-column-indexes.html 1>,B+树: h ...

  5. 字体图标Icon Font

    字体图标Icon Font 前段时间研究怎样做字体图标,在网上查找诸多资料,诸多尝试,找到一套可以自己制作自己独立控制的制作流程,公司按照这套流程形成一套自己公司图标,本人目前所在公司已经在使用没有发 ...

  6. AT2567-[ARC074C]RGB Sequence【dp】

    正题 题目链接:https://www.luogu.com.cn/problem/AT2567 题目大意 长度为\(n\)的包含三种颜色\(RGB\)的序列,\(m\)个限制\([l,r,k]\)表示 ...

  7. 使用jacob调用Windows的com对象,进行word、ppt等转换成ptf、html(二)

    富文本转pdf : 注意:simsun.ttc 可以百度下载:http://www.pc6.com/softview/SoftView_100415.html package com.orangecd ...

  8. Spring系列之Redis的两种集成方式

    在工作中,我们用到分布式缓存的时候,第一选择就是Redis,今天介绍一下SpringBoot如何集成Redis的,分别使用Jedis和Spring-data-redis两种方式. 一.使用Jedis方 ...

  9. IOS开发之UIScrollView约束布局

    概要 在iOS开发学习中,UIScrollView是绕不过去的一个重要控件. 但是相对于Android的ScrollView,iOS的这个滚动控件的用法简直是复杂一万倍... 最主要是目前能找到的大部 ...

  10. 基于PaddleOCR实现AI发票识别的Asp.net Core应用

    简要介绍 用户批量上传需要识别的照片,上传成功后,系统会启动Hangfire后台Job开始调用PaddleOCR服务返回结果,这个过程有点类似微服务的架构模型. PaddleOCR PaddleOCR ...