Linux IPC实践(8) --共享内存/内存映射
概述
共享内存区是最快的IPC形式。一旦这样的内存映射到共享它的进程的地址空间,这些进程间数据传递不再涉及到内核,换句话说是进程不再通过执行进入内核的系统调用来传递彼此的数据(如图)。
共享内存 VS. 其他IPC形式
用管道/消息队列传递数据
用共享内存传递数据
共享内存生成之后,传递数据并不需要再走Linux内核,共享内存允许两个或多个进程共享一个给定的存储区域,数据并不需要在多个进程之间进行复制,因此,共享内存的传输速度更快!
mmap内存映射
将文件/设备空间映射到共享内存区
#include <sys/mman.h> void *mmap(void *addr, size_t length, int prot, int flags, int fd, off_t offset); int munmap(void *addr, size_t length);
参数:
addr: 要映射的起始地址, 通常指定为NULL, 让内核自动选择;
length: 映射到进程地址空间的字节数;
prot: 映射区保护方式(见下);
flags: 标志(见下);
fd: 文件描述符;
offset: 从文件头开始的偏移量;
|
prot |
说明 |
|
PROT_READ |
页面可读 |
|
PROT_WRITE |
页面可写 |
|
PROC_EXEC |
页面可执行 |
|
PROC_NONE |
页面不可访问 |
|
flags |
说明 |
|
MAP_SHARED |
变动是共享的 |
|
MAP_PRIVATE |
变动是私有的 |
|
MAP_FIXED |
准确解释addr参数, 如果不指定该参数, 则会以4K大小的内存进行对齐 |
|
MAP_ANONYMOUS |
建立匿名映射区, 不涉及文件 |
mmap返回值:
成功: 返回映射到的内存区的起始地址;
失败: 返回MAP_FAILED;
内存映射示意图:
(注意: 内存映射时, 是以页面(4K)作为单位)
/** 示例1: 写文件映射
将文件以可读,可写的方式映射到进程的地址空间, 然后向其中写入内容
**/
struct Student
{
char name[4];
int age;
};
int main(int argc,char **argv)
{
if (argc != 2)
err_quit("usage: ./main <file-name>");
int fd = open(argv[1], O_CREAT|O_RDWR|O_TRUNC, 0666);
if (fd == -1)
err_exit("file open error");
//为内存映射争取空间
if (lseek(fd, sizeof(Student)*5-1, SEEK_SET) == (off_t)-1)
err_exit("lseek error");
write(fd, "", 1);
Student *p = (Student *)mmap(NULL, sizeof(Student)*5,
PROT_WRITE|PROT_READ, MAP_SHARED, fd, 0);
if (p == MAP_FAILED)
err_exit("mmap error");
// 此时:操纵文件就可以如同操纵内存一样了
char ch = 'a';
for (int i = 0; i < 5; ++i)
{
memcpy((p+i)->name, &ch, 1);
(p+i)->age = 20+i;
++ ch;
}
cout << "file initialized!" << endl;
if (munmap(p, sizeof(Student)*5) == -1)
err_exit("munmap error");
cout << "process exit..." << endl;
return 0;
}
/**示例2: 读文件映射
**/
int main(int argc,char **argv)
{
if (argc != 2)
err_quit("usage: ./main <file-name>");
//以只读方式打开
int fd = open(argv[1], O_RDONLY);
if (fd == -1)
err_exit("file open error");
void *mmap(void *addr, size_t length, int prot, int flags,
int fd, off_t offset);
Student *p = (Student *)mmap(NULL, sizeof(Student)*5,
PROT_READ, MAP_SHARED, fd, 0);
if (p == MAP_FAILED)
err_exit("mmap error");
// 从内存中读取数据(其实是从文件中读取)
for (int i = 0; i < 5; ++i)
{
cout << "name: " << (p+i)->name << ", age: " << (p+i)->age << endl;
}
if (munmap(p, sizeof(Student)*5) == -1)
err_exit("munmap error");
cout << "process exit..." << endl;
return 0;
}
map注意点:
1. 内存映射不能(也不可能)改变文件的大小;
2. 可用于进程间通信的有效地址空间不完全受限于映射文件的大小, 而应该以内存页面的大小为准(见下面测试);
3. 文件一旦被映射之后, 所有对映射区域的访问实际上是对内存区域的访问; 映射区域内容写会文件时, 所写内容不能超过文件的大小.
/** 测试: 注意点2
文件以40K的内容进行创建, 而以120K的内容进行写回
**/
//程序1: 写文件映射
int main(int argc,char **argv)
{
if (argc != 2)
err_quit("usage: ./main <file-name>");
int fd = open(argv[1], O_CREAT|O_RDWR|O_TRUNC, 0666);
if (fd == -1)
err_exit("file open error");
// 注意: 此处我们的文件其实只有40个字节
if (lseek(fd, sizeof(Student)*5-1, SEEK_SET) == (off_t)-1)
err_exit("lseek error");
write(fd, "", 1);
// 但是我们却是以120个字节的方式进行映射
Student *p = (Student *)mmap(NULL, sizeof(Student)*15,
PROT_WRITE|PROT_READ, MAP_SHARED, fd, 0);
if (p == MAP_FAILED)
err_exit("mmap error");
// 以120个字节的方式进行写入
char ch = 'a';
for (int i = 0; i < 15; ++i)
{
memcpy((p+i)->name, &ch, 1);
(p+i)->age = 20+i;
++ ch;
}
cout << "file initialized!" << endl;
// 以120字节的方式卸载该内存区
if (munmap(p, sizeof(Student)*15) == -1)
err_exit("munmap error");
// 注意: 要故意暂停一会儿, 以便让read程序读取该共享内存的内容
sleep(20);
cout << "process exit..." << endl;
}
//程序2: 读文件映射
int main(int argc,char **argv)
{
if (argc != 2)
err_quit("usage: ./main <file-name>");
//以只读方式打开
int fd = open(argv[1], O_RDONLY);
if (fd == -1)
err_exit("file open error");
void *mmap(void *addr, size_t length, int prot, int flags,
int fd, off_t offset);
// 以120字节的方式映射
Student *p = (Student *)mmap(NULL, sizeof(Student)*15,
PROT_READ, MAP_SHARED, fd, 0);
if (p == MAP_FAILED)
err_exit("mmap error");
// 以120字节的方式读取
for (int i = 0; i < 15; ++i)
{
cout << "name: " << (p+i)->name << ", age: " << (p+i)->age << endl;
}
if (munmap(p, sizeof(Student)*15) == -1)
err_exit("munmap error");
cout << "process exit..." << endl;
}
msync函数
int msync(void *addr, size_t length, int flags);
对映射的共享内存执行同步操作
参数:
addr: 内存起始地址;
length: 长度
flags: 选项
|
flags |
说明 |
|
MS_ASYNC |
执行异步写 |
|
MS_SYNC |
执行同步写, 直到内核将数据真正写入磁盘之后才返回 |
|
MS_INVALIDATE |
使高速缓存的数据失效 |
返回值:
成功: 返回0;
失败: 返回-1;
Linux IPC实践(8) --共享内存/内存映射的更多相关文章
- Linux IPC实践(10) --Posix共享内存
1. 创建/获取一个共享内存 #include <sys/mman.h> #include <sys/stat.h> /* For mode constants */ #inc ...
- Linux IPC实践(1) -- 概述
进程的同步与互斥 进程同步: 多个进程需要相互配合共同完成一项任务. 进程互斥: 由于各进程要求共享资源,而且有些资源需要互斥使用,因此各进程间竞争使用这些资源,进程的这种关系为进程的互斥;系统中某些 ...
- Linux IPC实践(9) --System V共享内存
共享内存API #include <sys/ipc.h> #include <sys/shm.h> int shmget(key_t key, size_t size, int ...
- Linux IPC System V 共享内存
模型 #include<sys/types.h> #include<sys/ipc.h> #include<sys/shm.h> ftok() //获取key值 s ...
- Linux IPC实践(13) --System V IPC综合实践
实践:实现一个先进先出的共享内存shmfifo 使用消息队列即可实现消息的先进先出(FIFO), 但是使用共享内存实现消息的先进先出则更加快速; 我们首先完成C语言版本的shmfifo(基于过程调用) ...
- Linux IPC实践(11) --System V信号量(1)
信号量API #include <sys/types.h> #include <sys/ipc.h> #include <sys/sem.h> int semget ...
- Linux IPC实践(7) --Posix消息队列
1. 创建/获取一个消息队列 #include <fcntl.h> /* For O_* constants */ #include <sys/stat.h> /* For m ...
- Linux IPC实践(4) --System V消息队列(1)
消息队列概述 消息队列提供了一个从一个进程向另外一个进程发送一块数据的方法(仅局限于本机); 每个数据块都被认为是有一个类型,接收者进程接收的数据块可以有不同的类型值. 消息队列也有管道一样的不足: ...
- Linux IPC实践(2) --匿名PIPE
管道概念 管道是Unix中最古老的进程间通信的形式,我们把从一个进程连接到另一个进程的一个数据流称为一个"管道", 管道的本质是固定大小的内核缓冲区; 如:ps aux | gre ...
随机推荐
- 566. Reshape the Matrix
In MATLAB, there is a very useful function called 'reshape', which can reshape a matrix into a new o ...
- Java数据库开发(一)之——JDBC连接数据库
一.MySQL数据库 1.创建数据库 CREATE DATABASE jdbc CHARACTER SET 'utf8'; 2.建表 CREATE TABLE user ( id int(10) NO ...
- c++ Lambda表达式待修改
C++11引入了lambda表达式,使得程序员可以定义匿名函数,该函数是一次性执行的,既方便了编程,又能防止别人的访问. Lambda表达式的语法通过下图来介绍: 这里假设我们定义了一个如上图的lam ...
- Node.js 逐行读取
逐行读取 稳定性: 2 - 不稳定 使用 require('readline'),可以使用这个模块.逐行读取(Readline)可以逐行读取流(比如process.stdin) 一旦你开启了这个模块, ...
- How to Change Default Web ADI Upload Parameters for FlexField Import / Validation
How to Change Default Web ADI Upload Parameters for FlexField Import / Validation (文档 ID 553345.1) 转 ...
- Scala:集合类型Collection和迭代器
http://blog.csdn.net/pipisorry/article/details/52902549 Scala Collection Scala 集合分为可变的和不可变的集合. 可变集合可 ...
- Swift基础之使用Alamofire库进行网络请求和断点下载
好久没有写过Swift相关的文章博客了,这里我就展示一下关于使用Alamofire库的方法 1.什么是Alamofire (1)Alamofire 的前身是 AFNetworking.AFNetwor ...
- Spark技术内幕:Shuffle Read的整体流程
回忆一下,每个Stage的上边界,要么需要从外部存储读取数据,要么需要读取上一个Stage的输出:而下边界,要么是需要写入本地文件系统(需要Shuffle),以供childStage读取,要么是最后一 ...
- 获取imageView的图和背景图
img1和img2都是ImageView,要把img1中的图片显示到img2中 前景(对应src属性) img2.setImageDrawable(img1.getDrawable()); 背景(对应 ...
- Linux Debugging (九) 一次生产环境下的“内存泄露”
一个偶然的机会,发现一个进程使用了超过14G的内存.这个进程是一个RPC server,只是作为中转,绝对不应该使用这么多内存的.即使并发量太多,存在内存中的数据太多,那么在并发减少的情况下,这个内存 ...