基础命令学习目录首页

原文链接:https://blog.csdn.net/cbbbc/article/details/48563023

前言

在网络传输、设备之间转存、复制大文件等时,可能会出现传输前后数据不一致的情况。这种情况在网络这种相对更不稳定的环境中,容易出现。那么校验文件的完整性,也是势在必行的。

使用说明

md5sum命令用于生成和校验文件的md5值。它会逐位对文件的内容进行校验。是文件的内容,与文件名无关,也就是文件内容相同,其md5值相同。md5值是一个128位的二进制数据,转换成16进制则是32(128/4)位的进制值。

md5校验,有很小的概率不同的文件生成的md5可能相同。比md5更安全的校验算法还有SHA*系列的。

在网络传输时,我们校验源文件获得其md5sum,传输完毕后,校验其目标文件,并对比如果源文件和目标文件md5 一致的话,则表示文件传输无异常。否则说明文件在传输过程中未正确传输。

重要的选项:

-b 以二进制模式读入文件内容

-t 以文本模式读入文件内容

-c 根据已生成的md5值,对现存文件进行校验

--status 校验完成后,不生成错误或正确的提示信息,可以通过命令的返回值来判断。

使用举例

生成文件md5值

md5sum file

  1.  [root@master lianxi]# md5sum data
  2.  0a6de444981b68d6a049053296491e49 data

使用通配对多个文件进行md5

  1.  [root@master lianxi]# md5sum *
  2.  0a6de444981b68d6a049053296491e49 data
  3.  13df384c47dd2638fd923f60c40224c6 data2

md5sum校验的是文件内容,与文件名无关

相同内容的文件的md5一样。如下我先对文件进行复制,然后对同内容不同名的文件进行md5,md5值一样

  1.  [root@master lianxi]# cp data data.bak
  2.  [root@master lianxi]# ls
  3.  data data.bak
  4.  [root@master lianxi]# md5sum *
  5.  0a6de444981b68d6a049053296491e49 data
  6.  0a6de444981b68d6a049053296491e49 data.bak

以文本模式或二进制模式读入文件并对其进行校验

-b 以二进制模式读入内容

-t 以文本模式读入文件内容进行校验

虽然是不同的读入模式,但是在进行求md5的时候,是一样的,因为是逐位校验的。

如下文本文件,无论通过哪种模式读取md5都一致。

  1.  [root@master lianxi]# file data
  2.  data: ASCII text
  3.  [root@master lianxi]# md5sum data
  4.  0a6de444981b68d6a049053296491e49 data
  5.  [root@master lianxi]# md5sum -b data
  6.  0a6de444981b68d6a049053296491e49 *data
  7.  [root@master lianxi]# md5sum -t data
  8.  0a6de444981b68d6a049053296491e49 data

md5值重定向

将生成md5值重定向到指定的文件,通常文件的扩展名我们会命为.md5

  1.  [root@master lianxi]# md5sum data > data.md5
  2.  [root@master lianxi]# md5sum data
  3.  0a6de444981b68d6a049053296491e49 data
  4.  [root@master lianxi]# cat data.md5
  5.  0a6de444981b68d6a049053296491e49 data

将多个文件的md5重定向到指定的文件

每个文件的md5生成为一行

  1.  [root@master lianxi]# ls
     
  2.  data data.bak data.md5 d.md5
     
  3.  [root@master lianxi]# md5sum data* > d.md5
     
  4.  [root@master lianxi]# cat d.md5
     
  5.  0a6de444981b68d6a049053296491e49 data
     
  6.  0a6de444981b68d6a049053296491e49 data.bak
     
  7.  7: 0bd94658869c53cdcdf35a0f7de93e01 data.md5
     

重定向追加

这里新增文件ls,单独求其md5,将其md5追加到文件中

  1.  [root@master lianxi]# cp /bin/ls .
     
  2.  [root@master lianxi]# ls
     
  3.  data data.bak data.md5 d.md5 ls
     
  4.  [root@master lianxi]# md5sum ls >> d.md5
     
  5.  [root@master lianxi]# cat d.md5
     
  6.  0a6de444981b68d6a049053296491e49 data
     
  7.  0a6de444981b68d6a049053296491e49 data.bak
     
  8.  0bd94658869c53cdcdf35a0f7de93e01 data.md5
     
  9.  c6337b20f3c159544bff5cf622391f9e ls
     

md5校验

-c选项来对文件md5进行校验。校验时,根据已生成的md5来进行校验。生成当前文件的md5,并和之前已经生成的md5进行对比,如果一致,则返回OK,否则返回错误信息

md5sum –c d.md5

  1.  1: [root@master lianxi]# md5sum -c d.md5
     
  2.  2: data: OK
     
  3.  3: data.bak: OK
     
  4.  4: data.md5: OK
     
  5.  5: ls: OK
     

修改文件后,文件md5变化

  1.  1: [root@master lianxi]# ls
     
  2.  2: data
     
  3.  3: [root@master lianxi]# md5sum data  
  4. 4: 2360752c3368ca4f89169f5ecc06e383 data
  5.  5: [root@master lianxi]# md5sum data > data.md5
     
  6.  6: [root@master lianxi]# echo "lwg" >> data
     
  7.  7: [root@master lianxi]# md5sum data
     
  8.  8: 287d237083a42f09785daa46a5fa3afe data
     
  9.  9: [root@master lianxi]# md5sum -c data.md5
     
  10.  10: data: FAILED
     
  11.  11: md5sum: WARNING: 1 of 1 computed checksum did NOT match
     

--status,不显示校验信息,以命令返回值来判断

校验一致返回0,不一致返回1

  1.  1: [root@master lianxi]# md5sum -c data.md5
     
  2.  2: data: FAILED
     
  3.  3: md5sum: WARNING: 1 of 1 computed checksum did NOT match
     
  4.  4: [root@master lianxi]# md5sum -c --status data.md5
     
  5.  5: [root@master lianxi]# echo $?
     
  6.  6: 1
     

多个文件文件校验和grep连用

通过grep将正确的信息过滤掉

  1.  1: [root@master lianxi]# md5sum -c ../value.md5
     
  2.  2: acpid: OK
     
  3.  3: acpid.1: OK
     
  4.  4: anaconda.log: OK
     
  5.  5: anaconda.syslog: OK
     
  6.  6: anaconda.xlog: OK
     
  7.  7: boot.log: OK
     
  8.  8: boot.log.1: OK
     
  9.  9: ...
     
  10.  10: ...
     
  11.  11: 省略中间部分
     
  12.  12: ...
     
  13.  13: ...
     
  14.  14: yum.log.2: OK
     
  15.  15: md5sum: WARNING: 1 of 56 computed checksums did NOT match
     
  16.  1: [root@master lianxi]# md5sum -c ../value.md5 | grep -v OK
     
  17.  2: md5sum: WARNING: 1 of 56 computed checksums did NOT match
     
  18.  3: cron.1: FAILED
     

特殊说明

1)md5sum 是校验文件内容,与文件名是否相同无关

2)md5sum值逐位校验,所以文件越大,校验时间越长。

总结

通过md5sum来校验生成文件校验码,来发现文件传输(网络传输、复制、本地不同设备间的传输)异常造成的文件内容不一致的情况。

md5sum命令详解的更多相关文章

  1. linux命令学习笔记-md5sum 命令详解

    前言 在网络传输.设备之间转存.复制大文件等时,可能会出现传输前后数据不一致的情况.这种情况在网络这种相对更 不稳定的环境中,容易出现.那么校验文件的完整性,也是势在必行的. 使用说明 md5sum命 ...

  2. 【转】linux命令详解:md5sum命令

    [转]linux命令详解:md5sum命令 转自:http://blog.itpub.net/29320885/viewspace-1710218/ 前言 在网络传输.设备之间转存.复制大文件等时,可 ...

  3. linux shell 脚本攻略学习13--file命令详解,diff命令详解

    一.file命令详解 find命令可以通过查看文件内容来找出特定类型的文件,在UNIX/ Linux系统中,文件类型并不是由文件扩展名来决定的(windows中却正是这么做的),file命令的目的是从 ...

  4. linux shell 脚本攻略学习8---md5校验,sort排序,uniq命令详解

    一.校验与核实 目前最为出名的校验技术是md5sum和sha1sum,它们对文件内容使用相应的算法来生成校验和. 举例: amosli@amosli-pc:~/learn$ md5sum text.t ...

  5. linux shell 脚本攻略学习5---find命令详解

    1.find命令详解 语法: find base_path#base_path可以是任何位置,find会从该位置向下找 实例: amosli@amosli-pc:~$ find /home/amosl ...

  6. 【转帖】linux sort,uniq,cut,wc,tr,xargs命令详解

    linux sort,uniq,cut,wc,tr,xargs命令详解 http://embeddedlinux.org.cn/emb-linux/entry-level/201607/21-5550 ...

  7. Git初探--笔记整理和Git命令详解

    几个重要的概念 首先先明确几个概念: WorkPlace : 工作区 Index: 暂存区 Repository: 本地仓库/版本库 Remote: 远程仓库 当在Remote(如Github)上面c ...

  8. linux yum命令详解

    yum(全称为 Yellow dog Updater, Modified)是一个在Fedora和RedHat以及SUSE中的Shell前端软件包管理器.基於RPM包管理,能够从指定的服务器自动下载RP ...

  9. Linux下ps命令详解 Linux下ps命令的详细使用方法

    http://www.jb51.net/LINUXjishu/56578.html Linux下的ps命令比较常用 Linux下ps命令详解Linux上进程有5种状态:1. 运行(正在运行或在运行队列 ...

随机推荐

  1. virtualbox+vagrant学习-2(command cli)-17-vagrant ssh命令

    SSH 格式: vagrant ssh [options] [name|id] [-- extra ssh args] 这将SSH导入正在运行的vagrant机器,并允许你访问机器的shell. us ...

  2. mysql报错:/usr/sbin/mysqld:unknown variable 'default-character-set=utf8'

    修改mysql的字符集时,为了将默认字符集设置为utf-8,便将/etc/my.cnf下[mysqld]加了一行 default-character-set=utf8, 但是在下次启动系统的时候,my ...

  3. 鴻雁 Anser cygnoides

    鴻雁 Anser cygnoides,其中 Anser 是屬名.雁屬的模式種是 Anser anser 灰雁,在中國也有分佈,但不如鴻雁和中國人關係密切.中國人所說的「大雁」一般指鴻雁,偶爾指灰雁或是 ...

  4. SQLite加密方式 [转]

    关于SQLite SQLite是一个轻量的.跨平台的.开源的数据库引擎,它的在读写效率.消耗总量.延迟时间和整体简单性上具有的优越性,使其成为移动平台数据库的最佳解决方案(如iOS.Android). ...

  5. Angular动态表单生成(八)

    动态表单生成之拖拽生成表单(下) 我们的动态表单,最终要实现的效果与Form.io的在线生成表单的效果类似,可以参考它的demo地址:https://codepen.io/travist/full/x ...

  6. C++网络爬虫的实现——WinSock编程

    写了一个网络爬虫,可以抓取网上的图片. 需要给定初始网站即可. 在vs2010中编译通过. 需要使用多字节字符集进行编译, vs2010默认的是Unicode字符集. 编译后,运行即可,有惊喜哦!!! ...

  7. 第8章 自己写库-构建库函数雏形—零死角玩转STM32-F429系列

    第8章     自己写库—构建库函数雏形 全套200集视频教程和1000页PDF教程请到秉火论坛下载:www.firebbs.cn 野火视频教程优酷观看网址:http://i.youku.com/fi ...

  8. 【H5】ie8如何兼容html5标签(hack)

    ie8是识别不了html5语义化标签的,解决方法: 在头部文件的<head></head>里面下如下代码    (这段代码的意思是如果ie版本低于ie8,就创建所有HTML5新 ...

  9. Oracle Data Provider for .NET – Microsoft .NET Core and Entity Framework Core

    http://www.oracle.com/technetwork/topics/dotnet/tech-info/odpnet-dotnet-ef-core-sod-4395108.pdf Orac ...

  10. 使用LINQ的Skip和Take函数分批获取数据

    Skip函数和Take函数是System.Linq对类Enumberable的扩展, 其中Skip函数是跳过序列中的前n个数据,参数为需要跳过的数据量, Take函数是取序列中的n个数据,参数为要获取 ...