HDFS分布式文件系统的常用命令行操作
一、HDFS的客户端种类
1.网页形式 =>用于测试
网址为你的namenode节点的ip+50070的端口号,如:
192.168.50.128:50070
2.命令行形式 =>用于测试
3.企业级API
二、HDFS客户端的命令行操作
注释:/hdfs为HDFS上的目录 /root/linux为本地集群路径
1.查看帮助
hdfs dfs -help
2.查看目录下的信息
hdfs dfs -ls /
hdfs dfs -ls -R / (查看根目录下所有文件和目录)
3.上传文件到HDFS集群
hdfs dfs -put /root/Linux/Dilireba.txt /hdfs (复制)
hdfs dfs -moveFormLocal /root/Linux/a.txt /hdfs/a.txt (剪切)
4.下载文件到本地
hdfs dfs -get /hdfs/a.txt /root/linux/a.txt
5.合并下载
hdfs dfs -getmerge /hdfs /root/linux/aa.txt
6.创建目录
hdfs dfs -mkdir /wyh
hdfs dfs -mkdir -p /wyh/dilireba/love (多级创建)
7.移动/重命名HDFS中的文件或目录
hdfs dfs -mv /hdfs/a.txt /hdfs/out/a.txt 移动
hdfs dfs -mv /hdfs/a.txt /hdfs/b.txt 重命名
8.复制HDFS文件到目标路径
hdfs dfs -cp /hdfs/a.txt /hunter
9.删除文件或目录
hdfs dfs -rm /hdfs/a.txt
hdfs dfs -rm -r /hdfs
10.查看HDFS中的文件
hdfs dfs -cat /hdfs/a.txt
hdfs dfs -tail -10 /hdfs/a.txt 查看后十行数据
11.查看目录中的文件、目录的数量和大小
hdfs dfs -count /hdfs
12.查看HDFS的总空间
hdfs dfs -df / 以字节为单位
hdfs dfs -df -h / 智能单位,可读性高
13.修改某文件的副本数
hdfs dfs -setrep 2 /hdfs/a.txt 修改a.txt文件副本数为2,默认为3
14.开启/关闭HDFS的安全模式
hdfs dfsadmin -safemode enter/leave
HDFS分布式文件系统的常用命令行操作的更多相关文章
- git 常用命令行操作
git常用命令行操作: 点击 git bash 进入到命令行: git clone https://github.com/wlz1244/qingoo.git //下载一个master分支代码 g ...
- ZooKeeper常用命令行操作
ZooKeeper常用命令行操作 通过./zkCli.sh 打开zk的客户端进入命令行后台 ls/ls2 列出当前节点下的子节点 ls2还会列出当前节点的状态 [zk: localhost:2181( ...
- HBase表的基本结构和常用命令行操作
一.HBase表的基本结构 1.概述: 平时常见的MySQL.Oracle数据库都是传统型关系数据库,它们都是按行查询.按行存储:而HBase为非关系型数据库,它是按列存储的的. 在HBase插入数据 ...
- mysql常用命令行操作
1.linux下彻底卸载mysql sudo rm /var/lib/mysql/ -Rsudo rm /etc/mysql/ -R sudo apt-get autoremove mysql* -- ...
- mysql常用命令行操作(二):表和库的操作、引擎、聚合函数
一.查看.创建.删除数据库 create database library default character set utf8 collate utf8_general_ci; # 创建数据库并设置 ...
- 第4章 ZK基本特性与基于Linux的ZK客户端命令行学习 4-1 zookeeper常用命令行操作
ls path [watch] watch是一个监督者.quota是zookeeper的子目录.目录就是节点的意思,对于zookeeper来说它是以一个节点来说的,所以说/就是根节点,zookeepe ...
- mysql常用命令行操作(一):登陆、退出、查看端口、修改密码、刷新
一.登陆和退出mysql mysql -u root -p # 登陆exit # 退出 二.查看当前mysql的端口号 show global variables like 'port'; 三.查看用 ...
- Hadoop HDFS分布式文件系统 常用命令汇总
引言:我们维护hadoop系统的时候,必不可少需要对HDFS分布式文件系统做操作,例如拷贝一个文件/目录,查看HDFS文件系统目录下的内容,删除HDFS文件系统中的内容(文件/目录),还有HDFS管理 ...
- 分布式进阶(十) linux命令行下载文件以及常用工具:wget、Prozilla、MyGet、Linuxdown、Curl、Axel
linux命令行下载文件以及常用工具:wget.Prozilla.MyGet.Linuxdown.Curl.Axel 本文介绍常用的几种命令行式的下载工具:wget.Prozilla.MyGet.Li ...
随机推荐
- idea Unable to open debugger port (127.0.0.1:58006) Address already in use: JVM_Bind 的解决办法
报错说端口58006 被占用了,于是去修改端口 重新dubug 发现换个端口号还是不行,同样的错误.有时候你把idea关闭重新打开依旧不起作用.最暴力的办法就是重启电脑... 问题解决: 查看使用中的 ...
- 2018 github热门项目
github流行的几个项目,我们来学习一下. 1. developer-roadmap-chinese image.png 项目简介:2018年web程序员路线中文版, 这个仓库里包含了一些前端,后端 ...
- java虚拟机内存不足,“Could not create the Java Virtual Machine”问题解决方案
java虚拟机内存不足,"Could not create the Java Virtual Machine"问题解决方案 在运行java程序时,遇到问题"Could n ...
- Confluence 6 邮件队列
需要发送的电子邮件将会在邮件队列中进行等待,Confluence 的邮件队列每分钟刷新一次.Confluence 的管理员也可以手动的刷新邮件队列中等待发送的消息. 如果在发送的时候出现了错误,那么出 ...
- Confluence 6 推荐的更新通知设置和禁用
你可以设置默认的发送选项(发送 / 不发送)和默认的发送时间(每天或每周). 如何配置推荐更新电子邮件通知: 在屏幕的右上角单击 控制台按钮 ,然后选择 General Configuration 链 ...
- Confluence 6 数据库整合的限制
数据库整合的限制 注意: Confluence 自带的 XML 方式导出方法并不适用于备份和整合大数据集.这里有一些第三方的数据库工具你可以使用能够帮助你对大数据集进行备份和整合.如果你在选择正确工具 ...
- 将Maven项目打包成可执行jar文件(引用第三方jar)
方法一. mvn assembly 或 mvn package (一个jar包) 把依赖包和自己项目的文件打包如同一个jar包(这种方式对spring的项目不支持) <build> ...
- IO 多路复用
IO 多路复用 多路复用也是要用单线程来处理客户端并发,与其他模型相比多出了select这个模块. 程序不再直接问操作系统要数据,而是先发起一个select调用,select会阻塞直到其中某个sock ...
- (批量更新)对多个符合条件的id做更新操作
需求描述:把checkbox勾选的对应id的记录的标志位置1或0,这个其实不难的,不过我自己做的话,肯定是多次访问数据库做更新,看了老大的代码,发现差距不是一般的大,老大把sql灵活运用,结果一次访问 ...
- 饮冰三年-人工智能-Python-10之C#与Python的对比
1:注释 C# 中 单行注释:// 多行注释:/**/ python 中 单行注释:# 多行注释:“““内容””” 2:字符串 C#中 "" 用双引号如("我是字符串&q ...