hadoop快照管理
快照相当于对目录做备份,并不会复制所有文件,而是记录文件的变化
命令用法
()hdfs dfsadmin -allowSnapshot 路径 (开启指定目录的快照功能)
()hdfs dfsadmin -disallowSnapshot 路径 (禁用制定目录的快照功能,默认是禁用)
()hdfs dfs -createSnapshot 路径 (对目录创建快照)
()hdfs dfs -createSnapshot 路径 名称 (指定名称创建快照)
()hdfs dfs -renameSnapshot 路径 旧名称 新名称 (重名名快照)
()hdfs lsSnapshottableDir (列出当前用户所有可用快照目录)
()hdfs snapshotDiff 路径1 路径2 (比较两个快照目录的不同之处)
()hdfs dfs -deleteSnapshot 快照路径 (删除快照)
案例实操
(1)开启/禁用制定目录的快照功能
[linyouyi@hadoop01 bin]$ hdfs dfsadmin -allowSnapshot /user
[linyouyi@hadoop01 bin]$ hdfs dfsadmin -disallowSnapshot /user
(2)对目录创建快照
[linyouyi@hadoop01 bin]$ hdfs dfs -createSnapshot /user
[linyouyi@hadoop01 bin]$ hdfs dfs -lsr /user/.snapshot/
通过web访问hdfs://hadoop01:50070/user/atguigu/input/.snapshot/s…..// 快照和源文
(3)指定名称创建快照
[linyouyi@hadoop01 bin]$ hdfs dfs -createSnapshot /user user01
(4)重名名快照
[linyouyi@hadoop01 bin]$ hdfs dfs -createSnapshot /user user01 user0001
(5)列出当前用户所有快照
[linyouyi@hadoop01 bin]$ hdfs lsSnapshottableDir
(6)比较两个快照目录的不同之处
[linyouyi@hadoop01 bin]$ hdfs snapshotDiff /user01 /user001
(7)恢复快照
[linyouyi@hadoop01 bin]$ hdfs dfs -cp /user/.snapshot/ /user
hadoop快照管理的更多相关文章
- Hadoop基础-Hadoop快照管理
Hadoop基础-Hadoop快照管理 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任. 一.快照的作用 快照可以迅速对文件(夹)进行备份,不产生新文件,使用差值存储,默认是禁用状态. ...
- Apache Hadoop 2.9.2 的快照管理
Apache Hadoop 2.9.2 的快照管理 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任. 快照相当于对目录做一个备份.并不会立即复制所有文件,而是指向同一个文件.当写入发生 ...
- linux中kvm的安装及快照管理
一.kvm的安装及状态查看 1.安装软件 yum -y install kvm virt-manager libvirt2.启动libvirtd 报错,升级device-mapper-libs yum ...
- hadoop队列管理(指定queue跑程序)
hadoop 升级到cdh5后,队列管理被取消,而是统一用资源池分配. hadoop2.0版本,Hadoop采用了平级队列组织方式,,管理员可将用户分到若干个扁平队列中,在每个队列中,可指定一个或几个 ...
- Hadoop权限管理
1.Hadoop权限管理包括以下几个模块: (1) 用户分组管理.用于按组为单位组织管理,某个用户只能向固定分组中提交作业,只能使用固定分组中配置的资源:同时可以限制每个用户提交的作业数,使用的资源量 ...
- 007.KVM虚机时间-快照管理
一 快照管理 1.1 创建快照 [root@kvm-host ~]# virsh snapshot-create vm03-centos6.8 [root@kvm-host ~]# virsh sna ...
- KVM-克隆和快照管理
kvm 虚拟机有两部分组成:img镜像文件和xml配置文件 /etc/libvirt/qemu #xml配置文件目录,存在虚拟机所有的详细信息 1.kvm虚拟机克隆 克隆命令 virt-clone - ...
- Microsoft iSCSI Software Target 快照管理
Microsoft iSCSI Software Target 支持快照管理,可以对设备进行手工创建快照.快照任务计划.快照回滚等操作. 首先配置iscsi 目标及设备映射关系,并在客户端通过发起程序 ...
- Hadoop 权限管理(转)
如下图,hadoop访问控制分为两级,其中ServiceLevel Authorization为系统级,用于控制是否可以访问指定的服务,例如用户/组是否可以向集群提交Job,它是最基础的访问控制,优先 ...
随机推荐
- Async await 异步编程说明
希望在编程上有些许提高所以 最近连续2篇博客都在说明多线程和异步编程的使用,异步和多线程之间区别请自行百度,因为理解不是特别透彻就不在叙述以免误导大家,这里写下新研究整理 task 和 await ...
- AutoFac mvc和WebAPI 注册Service (接口和实现)
AutoFac mvc和WebAPI 注册Service (接口和实现) 1.准备组件版本:Autofac 3.5.0 Autofac.Integration.Mvc 3.3.0.0 (I ...
- 解决MSF更新证书错误
如下图所示提示签名无效下载失败,导致更新不了msf 解决办法如下: echo 'deb http://apt.metasploit.com/ lucid main' > /etc/apt/sou ...
- Pregel 消息传递机制
- 01_ESP8266 NONO_SDK 创建工程模板
参考:https://wiki.ai-thinker.com/ai_ide_use , 仅作为学习笔记. 一.关于报错 注意:Eclipse 只是一个代码编写工具,它并不能读取 makefile 里 ...
- file_get_contents(): SSL operation failed with code 1
出现file_get_contents(): SSL operation failed with code 1的错误 方法需要添加参数,如下: $stream_opts = [ "ssl&q ...
- wpf tabcontrol内的datagrid的selectionChanged事件向往传递问题
tabcontrol 内的一个tabitem里是datagrid 当程序相应datagrid的selectionchanged事件后会向上传递到tabcontrol的selectionchanged事 ...
- php fopen用法以及解释
$log = fopen('./log.txt','a');//生成一个log.txt文件,a相当于文件的权限 fwrite($log,'成功'."\r\n");//写入文件 mo ...
- bzoj1040题解
[题意分析] 给你一个带权基环树森林,求它的点集的无邻点子集的最大权值和. [解题思路] 对于树的部分,做一遍拓扑排序+递推即可(f[i][j]表示第i个节点选取状态为j(0/1)可以得到的最大权值和 ...
- gulp 安装与使用
一.Gulp 是基于node.js 流(stream)的一个前端自动化构建工具,可以使用它构建自动化工作流程,简化我们工作量,让我们把重点放在功能的开发上,从而提高我们的开发效率和工作质量 我们可以用 ...