MPQ什么?

MPQ维基上说的非常明确。

简而言之,它是暴雪公司用于游戏数据打包的工具。星际争霸,魔兽争霸游戏中都有使用。该工具内含游戏资源加密和压缩等功能。

        git下载地址:https://github.com/stormlib/StormLib

MPQ文件总共同拥有四种格式:

第一种:FLAT格式。线性存储。

另外一种:Partial格式,分包的存储。

第三种:MPQE格式,加密存储。

第四种:BLOCK格式。模块存储。

FLAT格式最简单。只是该格式也支持对单个文件的加密和压缩。

本文主要分析FLAT格式,主要包括下面五点:

一、创建一个MPQ文件。

二、加入资源文件。

三、封装MPQ文件。

四、读取MPQ文件。

五、读取资源文件。

图一、图二、图三为FLAT格式的内部格式。

图一

一、创建一个MPQ文件。

主要过程是。调用SFileCreateArchive接口创建MPQ文件。创建成功之后,该接口会返回成功与否。同一时候将MPQ文件的句柄赋值给传进来的变量。

创建MPQ文件具体流程是:

1》在内存中初始化一个加密块StormBuffer;

2》尝试打开一个同名的MPQ文件。假如已经存在的同名文件不是MPQ文件,MPQ工具就会尝试用MPQ文件的格式读取该文件。为了避免同名的错误。在StormLib的样例中,有先删除同一文件夹想的同名文件,再创建MPQ文件的逻辑。

3》创建一个空的MPQ文件。

4》重置文件大小。

5》写入一个假的MPQ文件头部,即图一的A指向的区域。

MPQ的头部有四种不同的格式。分别拥有不同的长度,只是默认有一个最大长度是208字节。写这个假的MPQ文件头部,最基本的目的是占位,保证第一个数据文件的写入位置是在正确的。

6》假设是大文件,则创建大文件的索引表HetTable。

7》创建HashTabl,用来索引文件的。

以上七个过程。主要实现了两个结果,1、创建了MPQ文件,2、在内存中生成须要用到的MPQ数据。

二、加入资源文件。

主要过程是,调用SFileCreateFile接口。在MPQ文件里创建一个新的文件句柄。通过SFileWriteFile接口写入数据。

调用SFileCloseFile释放内存资源。

具体流程:

1》检查是不是内部文件。MPQ主要有两个内部文件,一个是listfile。另外一个attributes。假设不是内部文件,则向MPQ文件里加入新的文件。

2》找到MPQ文件里能够写入的位置。假设是第一次写入。则此时是图一B指向的区域。

但此时还没有写入。

3》通过HashString方法,将资源文件名称转化为hash索引值。以新的hash索引值从当前的HashTable中取一个TMPQHash数据结构。

4》假如不是第一次建立新文件。则此时,通过TMPQHash的dwBlockIndex值。在FileTable做dwBlockIndex偏移。获取新文件的入口TFileEntry。假如是第一次建立新文件。则会先到FileTable里面取出一个空暇的位置,分配一个TFileEntry。默认是取FileTable位置做dwFileTableSize偏移,而此时dwFileTableSize值是0,所以就是FileTable表中第一个位置。即图一B指向的区域。

同一时候分配一个TMPQHash(hash索引的取值与文件名称有关),分配完之后。与FileEntry关联。在FileEntry里通过dwHashIndex索引到hash表中的位置,TMPQHash通过dwBlockIndex索引到FileEntry。

5》拿到了FileEntry以后,在SFileAddFile_Init函数中初始化FileEntry的其它值。

经过这些逻辑。就能够拿到一个TMPQFile文件指针,用来写入数据。

6》通过SFileWriteFile接口写入文件数据,能够将资源文件分批写到MPQ文件里。也能够将资源文件一次写入MPQ文件里,两种都不会有问题。

图二

7》在将要写文件的前,会先写入一个扇区,默认有8字节,扇区与将要写入的数据的加密有关联。然后写入

数据,数据有选项,能够选择是否加密,是否压缩,是否选择数据作为单元文件存储。

写入完成之后,会再次写入当

前扇区,详细为什么要两次写入扇区,下一篇会继续分析。图二中。L指向的是真正的资源文件数据,K、M各自是扇

区。资源文件可选择加密和压缩。

图三

三、封装MPQ文件。

        封装挺重要的,封装时会将新生成的文件相关的数据更新到MPQ文件头部。覆盖原先的假头部。

封装的主要过程是。将与文件相关的HET表和BET表,以及HASH表,文件FileTable。按顺序写到最后一个资源文件的结尾位置。

封装逻辑运行完之后。新的MPQ文件内部结构如图三。

        详细流程是:                

             1》确定是否要写入listfile、attributes等文件,假设要,则会在MPQ文件里创建,并写入。

             2》调用SFileCloseArchive,找到能够写入HET、BET、HASH、FILETABLE表的位置,然后将这些表的数据写入到新的MPQ文件里。写入后MPQ文件内部如图三。表的数据会写在第N个数据文件之后。最后,回到头部更新MPQ文件头部。

3》释放内存中的资源。

四、读取MPQ文件。

主要流程是。打开MPQ文件,先读取头部。在读取正确之后,解析各个表的位置。获取数据文件位置。而且随意一个环节出错。都会退出。

        详细流程:

             1》初始化一个StormBuff(与数据加密有关)。然后用208字节的长度,从MPQ文件头部0位置開始读取,一次读取208字节。

读取完之后强制转化为TMPQHeader数据结构。

若TMPQHeader内部的数据是正确的,则開始读取文件,为了推断文件是否正确,MPQ会有很多检測。只是MPQ文件头部默认有四种格式。

每一种格式的长度都不一样。在确定头部之后。会调用memset。将超出的部分置0,确保新生成的MPQHeader数据正确。

2》通过新获得的头部数据结构。读取HASH表。Hash表通过TMPQHeader的dwHashTablePos属性。找到其在文件里的位置,并读取出。接着将文件里的数据,读取到内存里面,完毕Hash表数据的读取。

3》建立文件数据表。通过读取Hash表,初始化文件数据表FileTable。有了FileTable就能够得到FileEntry,有了文件入口。就能读取数据了。

4》加载listfile和attributes文件。

眼下我没用到这两个选项。

5》返回MPQ文件句柄。



        五、读取资源文件。

        有两种读取方式。

第一种是取出当中某一个特定的文件,另外一种遍历MPQ文件内部全部的数据文件。

        第一种取出一个文件是比較简单的。

        详细流程是:

             1》调用SFileOpenFileEx接口(Ex即外部文件的意思)。传入文件名称给该接口,接口内部会将文件名称转化为hash数据。通过hash数据的dwBlockIndex属性,算出FileEntry数据,有了FileEntry,就能够获得要读取的文件的数据的位置。而且获取该数据文件的句柄。也能够先调用SFileHasFile推断是否有该文件。

2》调用SFileGetFileSize获取文件大小,申请内存空间。调用SFileGetFileInfo获取文件信息,不是数据。

             3》调用SFileReadFile获取MPQ文件里特定资源文件的数据。

4》调用SFileCloseFile释放申请的内存。

另外一种略微复杂一些。

        详细流程是:

             1》调用SFileFindFirstFile,匹配符为*,则会所有匹配。返回一个hFind值。

2》运行读取一个文件的流程,上面已经说明,此处不再赘述。

             3》调用SFileFindNextFile获取下一个文件的入口。

4》循环运行1==>3流程。直至没有文件能够读取。

版权声明:本文博客原创文章,博客,未经同意,不得转载。

MPQ Storm库 源代码分析 一个的更多相关文章

  1. Muduo网络库源代码分析(六)TcpConnection 的生存期管理

    TcpConnection是使用shared_ptr来管理的类,由于它的生命周期模糊.TcpConnection表示已经建立或正在建立的连接.建立连接后,用户仅仅须要在上层类如TcpServer中设置 ...

  2. Muduo网络库源代码分析(四)EventLoopThread和EventLoopThreadPool的封装

    muduo的并发模型为one loop per thread+ threadpool.为了方便使用,muduo封装了EventLoop和Thread为EventLoopThread,为了方便使用线程池 ...

  3. Twitter Storm源代码分析之ZooKeeper中的目录结构

    徐明明博客:Twitter Storm源代码分析之ZooKeeper中的目录结构 我们知道Twitter Storm的所有的状态信息都是保存在Zookeeper里面,nimbus通过在zookeepe ...

  4. Android应用程序框架层和系统运行库层日志系统源代码分析

    文章转载至CSDN社区罗升阳的安卓之旅,原文地址:http://blog.csdn.net/luoshengyang/article/details/6598703 在开发Android应用程序时,少 ...

  5. Twitter Storm源代码分析之Nimbus/Supervisor本地目录结构

    storm集群里面工作机器分为两种一种是nimbus, 一种是supervisor, 他们通过zookeeper来进行交互,nimbus通过zookeeper来发布一些指令,supervisor去读z ...

  6. android开发源代码分析--多个activity调用多个jni库的方法

    android开发源代码分析--多个activity调用多个jni库的方法 有时候,我们在开发android项目时会遇到须要调用多个native c/jni库文件,下面是本人以前实现过的方法,假设有知 ...

  7. [Android] Volley源代码分析(五岁以下儿童)Q \\ u0026一个

    Volley源代码分析系列那里一段时间,告诉我,有许多私人留言,同时一些问题抛出.对于一些简单的问题,我们跳,这两天被连接到朋友@smali提出的问题.告诉我你不得不赞叹查看源代码时的详细程度,大家一 ...

  8. RTMPdump(libRTMP) 源代码分析 7: 建立一个流媒体连接 (NetStream部分 2)

    ===================================================== RTMPdump(libRTMP) 源代码分析系列文章: RTMPdump 源代码分析 1: ...

  9. RTMPdump(libRTMP) 源代码分析 6: 建立一个流媒体连接 (NetStream部分 1)

    ===================================================== RTMPdump(libRTMP) 源代码分析系列文章: RTMPdump 源代码分析 1: ...

随机推荐

  1. Moran’s I空间统计中出现内存溢出的问题

    在经济学.资源管理.生物地理学.政治地理学和人口统计等领域,经常会有如下的研究需求: 研究区域中的富裕区和贫困区之间的最清晰边界在哪里? 研究区域中存在可以找到异常消费模式的位置吗? 研究区域中意想不 ...

  2. log4j 实例 , 浅析

    一.新建log4j.propperties,放在工程的src目录下. #fileAppender log4j.rootCategory = DEBUG,file,consoleAppender log ...

  3. 为Linux用ISO制作U盘启动及基本原理

    制作成功后的基本最简文件夹文件图 一.系统的基本引导流程: 首先系统要引导isolinux.bin可执行程序,此程序是移动介质上引导用的,isolinux.bin执行成功后会载入其配置文件syslin ...

  4. Android开发有用技巧:推断当前系统语言版本号

    Locale locale = getResources().getConfiguration().locale; String language = locale.getLanguage(); 以上 ...

  5. 关闭 sqlserver提示信息

  6. win10无法新建文件夹怎么办 win10右键新建菜单设置方法

    有朋友安装了win10系统后发现右键菜单中没有新建项,而平时使用新建 - 文件夹项的机率很高.如何才能恢复桌面右键菜单中的新建项呢? 右键点击桌面空白处,在右键菜单中发现没有新建项: 桌面右键菜单没有 ...

  7. VS2010中使用CL快速 生成DLL的方法

    方案一: 1.命令行中输入cl example.cpp,生成example.obj和example.lib文件.有可能还会提示“没有入口点”的错误.这是因为我们的CPP中是要生成dll文件的,并没有m ...

  8. HDU 4284 状压dp+spfa

    题意: 给定n个点 m条无向边 d元. 以下m行表示每条边 u<=>v 以及花费 w 以下top 以下top行 num c d 表示点标为num的城市 工资为c 健康证价格为d 目标是经过 ...

  9. 基于lua的网页脚本开发语言cgilua(转)

    这里为大家介绍基于lua脚本实现的网页开发语言,cgilua 介绍 cgilua使用Lua是一个用于创建动态网页的服务器端脚本语言.纯LUA脚本和LUA页(LP)的支持,cgilua.Lua脚本是一个 ...

  10. 玩转Web之easyui(三)-----easy ui dataGird 重新指定url以获取不同数据源信息

    如果已经写了一个dataGird并且已经通过url绑定数据源,能不能在其他地方改变url使其从不同数据源获取信息,从而实现查询等操作?答案当然是肯定的,而且仅需要几行代码 $('#btnq').bin ...