文件/文件系统的压缩、打包

Linux有哪些压缩工具可供选择

按压缩比:xz>bzip2>gzip,按压缩时长:gzip>bzip2>xz,另外还有zip可以选择。

gzip只负责压缩没有打包功能,所以常常和打包工具tar联用,如果单独用gzip要注意两点:①只能对单个文件进行压缩;②默认用压缩后的文件替换原来的文件

我该如何选择这些压缩工具?

这确实是个问题,最优解的压缩工具需要不断的尝试,而且每个人使用压缩工具的目的不甚相同。

比如,经常不读的服务器日志文件,我们就希望尽可能地把它压缩得小一点。如果只考虑体积,自然要选择压缩比较高的工具。但如果我们希望在拥有较小体积的同时还能够用更短的时间完成压缩,我们可能就要选择更厉害的程序,同时用更高的算力提供支持。

如果只是一般应用,我觉得gzip和tar命令连用完全能够满足大多数需求。

Linux打包命令tar

打包并压缩:tar -cvzf filename.tar.gz

查询包中的文件:tar -vtzf filename.tar.gz

解压缩 tar -xzvf filename.tar.gz  # 解压缩后的文件放在哪取决于你当前的工作目录。如果你不想在工作目录下解压缩文件请用 -C参数指定解压缩的路径!

强烈建议 -f参数放在最后,如果是不太熟悉tar命令的朋友甚至可以把 -f参数与之前的几个参数分开写,如:tar -cvz -f  filename.tar.gz 因为系统会认为-f后面接的是要使用的文件名,如果把参数f放在前面,有可能会造成文件名设置不正确的情况。

XFS 文件系统的备份与还原

xfsdump和xfsrestore

xfsdump -f filename.dump dir[filesystem]

xfsrestore -f filename.dump 恢复出来的文件所放路径

这两个工具一个负责备份一个负责还原。

xfsdump默认只对整个文件系统(你可以把它看成整个分区,但这种说法并不严谨)进行备份,但可以追加 -s 参数指定备份某个目录(相对路径)或文件。xfsrestore想恢复多个文件或目录可以追加 -i 参数通过互动模式将指定的文件或路径释放到指定的目录。

备份/boot/grub2这个目录,如不指定备份级别系统默认level 0(全量备份)

[root@study_rhel tmp]# xfsdump -f /backups/grub2.dump -l 0 /boot -s grub2  # grub2后面不要加斜杠,否则会报错提示你给的不是相对路径
xfsdump: using file dump (drive_simple) strategy
xfsdump: version 3.1.3 (dump format 3.0) - type ^C for status and control ============================= dump label dialog ============================== please enter label for this dump session (timeout in 300 sec)
-> grub2-bak
session label entered: "grub2-bak" --------------------------------- end dialog --------------------------------- ……略…… ============================= media label dialog ============================= please enter label for media in drive 0 (timeout in 300 sec)
-> grub2-bak
media label entered: "grub2-bak" --------------------------------- end dialog --------------------------------- ……
xfsdump: dump complete: 13 seconds elapsed
xfsdump: Dump Summary:
xfsdump: stream 0 /backups/grub2.dump OK (success)
xfsdump: Dump Status: SUCCESS
[root@study_rhel tmp]# ll /backups/
total 7996
-rw-r--r--. 1 root root 8184936 May 12 16:47 grub2.dump

这两个命令有以下限制:

  • 只支持xfs系统
  • 只能在已挂载的文件系统上进行操作
  • 只能以root用户身份操作

它们的特点是支持增量备份(但在创建增备之前需要有至少一个全量备份),增备的好处和劣势都显而易见。

  • 好处:一次全量备份后,每次增备的数据量都不会太大,缩短了备份时间,减小了备份体积。
  • 劣势:恢复数据时,需要按顺序先恢复全量备份,再由远及近按顺序恢复增备1、增备2……恢复数据比较麻烦。

然而这种劣势可以通过定期的全量备份缓解,比如一个星期定期全量备份一次,在两次全量备份之间用增量备份。

已知的问题:我不知道与xfsdump相关的备份删除工具,只能通过rm命令删除备份文件,造成xfsdump备份时写入/var/lib/xfsdump/inventory的信息无法同步更新,输入xfsdump -I 仍旧能够看到已不存在的备份信息。谁知道这个问题该怎么规避希望不吝赐教!

dd命令

dd if="input_file" of="output_file" bs="block_size" count="number"

dd是一个非常有意思的命令,它默认是一个扇区一个扇区读写的。如果用它来备份一个文件系统,它会把没有用到的扇区也读取写入备份中,这就会使备份的文件和原来的文件一模一样。这种“忠实”使得它可以不考虑文件系统,读到什么就写什么。

观察/dev/sda1文件系统大小(其实就挂载在/boot目录上),在虚拟机中新添加一个硬盘/dev/sdb,容量不小于前者的大小,用dd将/sda1完整地备份至新硬盘中

[root@study_rhel Desktop]# df -h
Filesystem Size Used Avail Use% Mounted on
/dev/mapper/rhel-root 18G 3.6G 14G 21% /
……
/dev/sda1 497M 129M 369M 26% /boot
…… ……添加一块硬盘,大小1G,设备文件名称/dev/sdb…… [root@study_rhel Desktop]# dd if=/dev/sda1 of=/dev/sdb
1024000+0 records in
1024000+0 records out
524288000 bytes (524 MB) copied, 11.3339 s, 46.3 MB/s # 这个新硬盘事先没有分区、格式化或挂载,竟然可以直接写入,神奇!
[root@study_rhel Desktop]# xfs_repair -L /dev/sdb
Phase 1 - find and verify superblock...
Phase 2 - using internal log
……
Phase 7 - verify and correct link counts...
done
[root@study_rhel Desktop]# uuidgen
4809b0ee-d934-4bdb-a901-f0fd82d0d049
[root@study_rhel Desktop]# xfs_admin -U 4809b0ee-d934-4bdb-a901-f0fd82d0d049 /dev/sdb # dd命令把所有数据原原本本的复制过来,甚至包括文件系统的UUID!为了不造成冲突,我们需要生成新的UUID给这个硬盘使用
Clearing log and setting UUID
writing all SBs
new UUID = 4809b0ee-d934-4bdb-a901-f0fd82d0d04
[root@study_rhel Desktop]# mount /dev/sdb /backups/
[root@study_rhel Desktop]# df -h
Filesystem Size Used Avail Use% Mounted on
……
/dev/sda1 497M 129M 369M 26% /boot
/dev/sdb 497M 129M 369M 26% /backups # 两者一模一样,但新硬盘是1G大小啊,怎么回事?
[root@study_rhel Desktop]# parted /dev/sdb print # parted读到的信息没有错
Model: VMware, VMware Virtual S (scsi)
Disk /dev/sdb: 1074MB
Sector size (logical/physical): 512B/512B
Partition Table: loop
Disk Flags: Number Start End Size File system Flags
1 0.00B 1074MB 1074MB xfs
[root@study_rhel Desktop]# xfs_growfs /backups/ # 把文件系统放大就不会出现上面的问题了
meta-data=/dev/sdb isize=256 agcount=4, agsize=32000 blks
……
data blocks changed from 128000 to 262144
[root@study_rhel Desktop]# df -h /boot /backups/
Filesystem Size Used Avail Use% Mounted on
/dev/sda1 497M 129M 369M 26% /boot
/dev/sdb 1021M 129M 893M 13% /backups

最后的tips:文件的后缀名对于Linux系统来说没任何意义,但对人来说是有意义的。我们可以根据文件的后缀名了解文件是什么类型的,该用什么命令对这个文件进行操作。

比如,tar.gz告诉我们这个包是用tar命令生成并用gzip压缩的,解压缩的时候一定要选用正确的程序,否则就会出错。

Linux中文件/文件系统的压缩、打包和备份总结(基于rhel7)的更多相关文章

  1. Linux中文件查找,压缩和打包指令

    1.文件的查找和搜索 可执行文件的搜索:which .whereis locate搜索文件 find搜索文件       1.1可执行文件的搜索       在Linux系统中,有成百上千个指令,不同 ...

  2. linux中文件压缩介绍

    原文内容来自于LZ(楼主)的印象笔记,如出现排版异常或图片丢失等问题,可查看当前链接:https://app.yinxiang.com/shard/s17/nl/19391737/1c62bb7f-f ...

  3. LSOF查看linux中文件打开情况

    如何查看linux中文件打开情况 前言 我们都知道,在linux下,“一切皆文件”,因此有时候查看文件的打开情况,就显得格外重要,而这里有一个命令能够在这件事上很好的帮助我们-它就是lsof. lin ...

  4. linux中文件IO

    一. linux常用文件IO接口 1.1. 文件描述符 1.1.1. 文件描述符的本质是一个数字,这个数字本质上是进程表中文件描述符表的一个表项,进程通过文件描述符作为index去索引查表得到文件表指 ...

  5. linux中文件颜色,蓝色,白色等各自代表的含义

    linux中文件颜色,蓝色,白色等各自代表的含义 绿色文件---------- 可执行文件,可执行的程序 红色文件-----------压缩文件或者包文件 蓝色文件----------目录 白色文件- ...

  6. [转]Linux中文件权限目录权限的意义及权限对文件目录的意义

    转自:http://www.jb51.net/article/77458.htm linux中目录与文件权限的意义 一.文件权限的意义 r:可以读这个文件的具体内容: w:可以编辑这个文件的内容,包括 ...

  7. Linux中的文件压缩,打包和备份命令

    压缩解压命令 gzip  文件   -c : 将压缩数据输出到屏幕,可用来重定向 -v   显示压缩比等信息 -d   解压参数 -t    用来检验一个压缩文件的一致性看看档案有没错 -数字 : 压 ...

  8. linux中文件压缩与打包

    一.常见的压缩命令 在linux环境中,压缩文件的扩展名大多是*.tar,*.tar.gz,*.tgz,*.gz,*.Z,*.bz2,首先我们来介绍以下这些压缩文案的扩展名:. *.Z:compres ...

  9. Linux中文件压缩与解压

    压缩与解压 compress 文件名 1 -v //详细信息 2 3 -d //等于 uncompress 默认只识别 .Z 如果使用别的后缀,会导致不识别,解压缩失败.也可以使用 -d -c 压缩包 ...

随机推荐

  1. Spring 应用程序有哪些不同组件?

    Spring 应用一般有以下组件:接口 - 定义功能.Bean 类 - 它包含属性,setter 和 getter 方法,函数等.Spring 面向切面编程(AOP) - 提供面向切面编程的功能.Be ...

  2. Servlet的url-pattern配置

    url匹配规则 1)精确配置 精确匹配是指<servlet-mapping>中配置的值必须与请求中的url完全精确匹配. <servlet-mapping> <servl ...

  3. 走一步再走一步,揭开co的神秘面纱

    前言 原文地址 源码地址 了解co的前提是已经知晓generator是什么,可以看软大神的Generator 函数的语法,co是TJ大神写的能够使generator自动执行的函数库,而我们熟知的koa ...

  4. Wepy-小程序踩坑记

    引言 用过原生开发的小程序也知道除了api 其他功能性的内容并不多对于需要做大型项目来说是比较难入手的,因此朋友推荐的wepy我就入坑鸟...这么一个跟vue的开发方式类似的框架,不过说起来跟vue类 ...

  5. Spring MVC框架搭建及其详解

    现在主流的Web MVC框架除了Struts这个主力 外,其次就是Spring MVC了,因此这也是作为一名程序员需要掌握的主流框架,框架选择多了,应对多变的需求和业务时,可实行的方案自然就多了.不过 ...

  6. Blazor组件自做四 : 使用JS隔离封装signature_pad签名组件

    运行截图 演示地址 响应式演示 感谢szimek写的棒棒的signature_pad.js项目, 来源: https://github.com/szimek/signature_pad 正式开始 1. ...

  7. golang 中 sync.Mutex 的实现

    mutex 的实现思想 mutex 主要有两个 method: Lock() 和 Unlock() Lock() 可以通过一个 CAS 操作来实现 func (m *Mutex) Lock() { f ...

  8. MFC---典型类和函数

    在MFC中,典型的类有CString.CRect.CDialog等,这些类的使用方法是通用的,下文以CString类的使用为例做一个详细说明.类的使用主要还是使用类的方法,可以查看类的定义,查看这个类 ...

  9. Spring-级联赋值

    一.级联赋值第一种方法 1.创建Emp类 package com.bean; public class Emp { private String EName; private String gende ...

  10. pycharm的安装指导教程以及破解

    第一步:下载 下载网址:https://www.jetbrains.com/pycharm/download/#section=windows 根据自己的操作系统选择,然后点击download就开始下 ...