HDFS分布式文件系统的常用命令行操作
一、HDFS的客户端种类
1.网页形式 =>用于测试
网址为你的namenode节点的ip+50070的端口号,如:
192.168.50.128:50070
2.命令行形式 =>用于测试
3.企业级API
二、HDFS客户端的命令行操作
注释:/hdfs为HDFS上的目录 /root/linux为本地集群路径
1.查看帮助
hdfs dfs -help
2.查看目录下的信息
hdfs dfs -ls /
hdfs dfs -ls -R / (查看根目录下所有文件和目录)
3.上传文件到HDFS集群
hdfs dfs -put /root/Linux/Dilireba.txt /hdfs (复制)
hdfs dfs -moveFormLocal /root/Linux/a.txt /hdfs/a.txt (剪切)
4.下载文件到本地
hdfs dfs -get /hdfs/a.txt /root/linux/a.txt
5.合并下载
hdfs dfs -getmerge /hdfs /root/linux/aa.txt
6.创建目录
hdfs dfs -mkdir /wyh
hdfs dfs -mkdir -p /wyh/dilireba/love (多级创建)
7.移动/重命名HDFS中的文件或目录
hdfs dfs -mv /hdfs/a.txt /hdfs/out/a.txt 移动
hdfs dfs -mv /hdfs/a.txt /hdfs/b.txt 重命名
8.复制HDFS文件到目标路径
hdfs dfs -cp /hdfs/a.txt /hunter
9.删除文件或目录
hdfs dfs -rm /hdfs/a.txt
hdfs dfs -rm -r /hdfs
10.查看HDFS中的文件
hdfs dfs -cat /hdfs/a.txt
hdfs dfs -tail -10 /hdfs/a.txt 查看后十行数据
11.查看目录中的文件、目录的数量和大小
hdfs dfs -count /hdfs
12.查看HDFS的总空间
hdfs dfs -df / 以字节为单位
hdfs dfs -df -h / 智能单位,可读性高
13.修改某文件的副本数
hdfs dfs -setrep 2 /hdfs/a.txt 修改a.txt文件副本数为2,默认为3
14.开启/关闭HDFS的安全模式
hdfs dfsadmin -safemode enter/leave
HDFS分布式文件系统的常用命令行操作的更多相关文章
- git 常用命令行操作
git常用命令行操作: 点击 git bash 进入到命令行: git clone https://github.com/wlz1244/qingoo.git //下载一个master分支代码 g ...
- ZooKeeper常用命令行操作
ZooKeeper常用命令行操作 通过./zkCli.sh 打开zk的客户端进入命令行后台 ls/ls2 列出当前节点下的子节点 ls2还会列出当前节点的状态 [zk: localhost:2181( ...
- HBase表的基本结构和常用命令行操作
一.HBase表的基本结构 1.概述: 平时常见的MySQL.Oracle数据库都是传统型关系数据库,它们都是按行查询.按行存储:而HBase为非关系型数据库,它是按列存储的的. 在HBase插入数据 ...
- mysql常用命令行操作
1.linux下彻底卸载mysql sudo rm /var/lib/mysql/ -Rsudo rm /etc/mysql/ -R sudo apt-get autoremove mysql* -- ...
- mysql常用命令行操作(二):表和库的操作、引擎、聚合函数
一.查看.创建.删除数据库 create database library default character set utf8 collate utf8_general_ci; # 创建数据库并设置 ...
- 第4章 ZK基本特性与基于Linux的ZK客户端命令行学习 4-1 zookeeper常用命令行操作
ls path [watch] watch是一个监督者.quota是zookeeper的子目录.目录就是节点的意思,对于zookeeper来说它是以一个节点来说的,所以说/就是根节点,zookeepe ...
- mysql常用命令行操作(一):登陆、退出、查看端口、修改密码、刷新
一.登陆和退出mysql mysql -u root -p # 登陆exit # 退出 二.查看当前mysql的端口号 show global variables like 'port'; 三.查看用 ...
- Hadoop HDFS分布式文件系统 常用命令汇总
引言:我们维护hadoop系统的时候,必不可少需要对HDFS分布式文件系统做操作,例如拷贝一个文件/目录,查看HDFS文件系统目录下的内容,删除HDFS文件系统中的内容(文件/目录),还有HDFS管理 ...
- 分布式进阶(十) linux命令行下载文件以及常用工具:wget、Prozilla、MyGet、Linuxdown、Curl、Axel
linux命令行下载文件以及常用工具:wget.Prozilla.MyGet.Linuxdown.Curl.Axel 本文介绍常用的几种命令行式的下载工具:wget.Prozilla.MyGet.Li ...
随机推荐
- FileStorage
1. 函数说明 功能 函数声明 参数 FileStorage构造函数 cv::FileStorage:: FileStorage(const String& ...
- Linux 用户切换、修改用户名、修改密码
一.用户切换 "$":普通用户提示符 "#":root用户提示符 1.普通用户到root: 方式一:命令:su然后输入root密码 此种方式只是切换了root身 ...
- linux学习笔记:第二单元 UNIX和Linux操作系统概述
第二单元 UNIX和Linux操作系统概述 UNIX是什么 UNIX操作系统的特点 UNIX 与Linux的关系 GNU项目与自由软件 GUN计划 自由软件意味着什么 Linux简介 Linux是什么 ...
- 《剑指offer》 调整数组顺序使得奇数在偶数前面
本题来自<剑指offer> 调整数组顺序使得奇数在偶数前面 题目: 输入一个整数数组,实现一个函数来调整该数组中数字的顺序,使得所有的奇数位于数组的前半部分,所有的偶数位于数组的后半部分, ...
- 雅礼 noip2018 模拟赛day3 T2
典型的状压思想 设0表示黑球,1表示白球,用一串01序列代表剩下的球的状态,记f[i]表示在i状态下取球的最大期望 那么可以利用记忆化搜索更新,每一层枚举可能拿走的球然后向下搜索,同时记忆化即可 在状 ...
- CentOS下将Python的版本升级为3.x
本文主要介绍在Linux(CentOS)下将Python的版本升级为3.x的方法 众所周知,在2020年python官方将不再支持2.7版本的python,所以使用3.x版本的python是必要的,但 ...
- 性能测试四十八:Jenkins+Ant+Jmeter系统部署
工作步骤: 1.开发提交代码SVN/Git 2.代码编译.打war包 3.上传war包到服务器 4.重启web服务器 5.开始测试/自动化测试 6.发测试结果 Jenkins工作: 1.开发提交代码G ...
- Python关键字及其用法
Python有哪些关键字 -Python常用的关键字 and, del, from, not, while, as, elif, global, or, with, assert, else, if ...
- Deap thinking
它使任何人离任何问题的答案间的距离变得只有点击一下鼠标这么远! ---------<美国周刊> ---------周志华<机器学习> 所以我们更应该学会Deep Think ...
- Oracle数据重复,只取一条
--方法一 select * from tb_supply where rowid=any(select max(rowid) from tb_supply group by phone_id) -- ...