快照相当于对目录做备份,并不会复制所有文件,而是记录文件的变化
命令用法

()hdfs dfsadmin -allowSnapshot 路径 (开启指定目录的快照功能)
()hdfs dfsadmin -disallowSnapshot 路径 (禁用制定目录的快照功能,默认是禁用)
()hdfs dfs -createSnapshot 路径 (对目录创建快照)
()hdfs dfs -createSnapshot 路径 名称 (指定名称创建快照)
()hdfs dfs -renameSnapshot 路径 旧名称 新名称 (重名名快照)
()hdfs lsSnapshottableDir (列出当前用户所有可用快照目录)
()hdfs snapshotDiff 路径1 路径2 (比较两个快照目录的不同之处)
()hdfs dfs -deleteSnapshot 快照路径 (删除快照)

案例实操
(1)开启/禁用制定目录的快照功能

[linyouyi@hadoop01 bin]$ hdfs dfsadmin -allowSnapshot /user
[linyouyi@hadoop01 bin]$ hdfs dfsadmin -disallowSnapshot /user

(2)对目录创建快照

[linyouyi@hadoop01 bin]$ hdfs dfs -createSnapshot /user
[linyouyi@hadoop01 bin]$ hdfs dfs -lsr /user/.snapshot/

通过web访问hdfs://hadoop01:50070/user/atguigu/input/.snapshot/s…..// 快照和源文
(3)指定名称创建快照

[linyouyi@hadoop01 bin]$ hdfs dfs -createSnapshot /user user01

(4)重名名快照

[linyouyi@hadoop01 bin]$ hdfs dfs -createSnapshot /user user01 user0001

(5)列出当前用户所有快照

[linyouyi@hadoop01 bin]$ hdfs lsSnapshottableDir

(6)比较两个快照目录的不同之处

[linyouyi@hadoop01 bin]$ hdfs snapshotDiff /user01 /user001

(7)恢复快照

[linyouyi@hadoop01 bin]$ hdfs dfs -cp /user/.snapshot/ /user

hadoop快照管理的更多相关文章

  1. Hadoop基础-Hadoop快照管理

    Hadoop基础-Hadoop快照管理 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任. 一.快照的作用 快照可以迅速对文件(夹)进行备份,不产生新文件,使用差值存储,默认是禁用状态. ...

  2. Apache Hadoop 2.9.2 的快照管理

    Apache Hadoop 2.9.2 的快照管理 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任. 快照相当于对目录做一个备份.并不会立即复制所有文件,而是指向同一个文件.当写入发生 ...

  3. linux中kvm的安装及快照管理

    一.kvm的安装及状态查看 1.安装软件 yum -y install kvm virt-manager libvirt2.启动libvirtd 报错,升级device-mapper-libs yum ...

  4. hadoop队列管理(指定queue跑程序)

    hadoop 升级到cdh5后,队列管理被取消,而是统一用资源池分配. hadoop2.0版本,Hadoop采用了平级队列组织方式,,管理员可将用户分到若干个扁平队列中,在每个队列中,可指定一个或几个 ...

  5. Hadoop权限管理

    1.Hadoop权限管理包括以下几个模块: (1) 用户分组管理.用于按组为单位组织管理,某个用户只能向固定分组中提交作业,只能使用固定分组中配置的资源:同时可以限制每个用户提交的作业数,使用的资源量 ...

  6. 007.KVM虚机时间-快照管理

    一 快照管理 1.1 创建快照 [root@kvm-host ~]# virsh snapshot-create vm03-centos6.8 [root@kvm-host ~]# virsh sna ...

  7. KVM-克隆和快照管理

    kvm 虚拟机有两部分组成:img镜像文件和xml配置文件 /etc/libvirt/qemu #xml配置文件目录,存在虚拟机所有的详细信息 1.kvm虚拟机克隆 克隆命令 virt-clone - ...

  8. Microsoft iSCSI Software Target 快照管理

    Microsoft iSCSI Software Target 支持快照管理,可以对设备进行手工创建快照.快照任务计划.快照回滚等操作. 首先配置iscsi 目标及设备映射关系,并在客户端通过发起程序 ...

  9. Hadoop 权限管理(转)

    如下图,hadoop访问控制分为两级,其中ServiceLevel Authorization为系统级,用于控制是否可以访问指定的服务,例如用户/组是否可以向集群提交Job,它是最基础的访问控制,优先 ...

随机推荐

  1. 上线出现[x86_64, i386]

    echo "Target architectures: $ARCHS" APP_PATH="${TARGET_BUILD_DIR}/${WRAPPER_NAME}&quo ...

  2. python redis 批量设置过期key

    在使用 Redis.Codis 时,我们经常需要做一些批量操作,通过连接数据库批量对 key 进行操作: 关于未过期: 1.常有大批量的key未设置过期,导致内存一直暴增 2.rd需求 扫描出这些ke ...

  3. java.lang.ThreadLocal的作用和原理?列举在哪些程序中见过ThreadLocal的使用?

    java.lang.ThreadLocal的作用和原理?列举在哪些程序中见过ThreadLocal的使用? 说明类java.lang.ThreadLocal的作用和原理.列举在哪些程序中见过Threa ...

  4. Spring Boot 2.X 实现文件上传(三)

    使用 SpringBoot 项目完成单个.多个文件的上传处理,并将上传的文件保存到指定目录下. 代码演示案例 所有的 HTML 页面文件 index.html <!DOCTYPE html> ...

  5. Servlet(Server Applet) 详解

    Java编写的服务器端程序.其主要功能在于交互式地浏览和修改数据,生成动态Web内容. Servlet的工作模式 客户端发送请求至服务器 服务器启动并调用Servlet,Servlet根据客户端请求生 ...

  6. css美化checkbox的样式

    使用iCheck插件可以改变checkbox.radio的原有样式,但是改变的样式尺寸有些大修改起来也比较麻烦,并且需要使用iCheck的调用方法才能使用,有时候iCheck方法还会覆盖掉同级元素的c ...

  7. fabric.js 限制缩放的最大最小比例

    var rect = new fabrics.Rect({ v: true, top: 216, left: 384, width: 160, height: 90, fill: 'transpare ...

  8. 基于Netty的RPC架构学习笔记(十):自定义数据包协议

    文章目录 数据包简介 粘包.分包现象 数据包格式 举个

  9. union, enum, and struct, 以及结构填充和位字段实现。

    Table 4-9 Compiler storage of data objects by byte alignment Type Bytes Alignment char, bool, _Bool ...

  10. Spark 调优之数据倾斜

    什么是数据倾斜? Spark 的计算抽象如下 数据倾斜指的是:并行处理的数据集中,某一部分(如 Spark 或 Kafka 的一个 Partition)的数据显著多于其它部分,从而使得该部分的处理速度 ...