glibc内存管理方式
程序员接触的内存空间和系统接触的物理内存空间是有所区别的。对于一般进程来讲,他面对的是一个线性虚拟内存空间:地址从0到最大值。每一个进程面对的虚拟内存空间都是一样的,都享有全部的内存地址。虚拟内存空间是线性的,但并不意味着是连续的。部分地址段的虚拟空间可以是缺失的(不是所有地址都可以用来存储数据)。
虚拟内存可以按页管理,每一页大小一般为4kb。每一页背后都有一个实际物理内存(可以是主存也可以是辅存)与之对应。在物理内存中我们不叫页,而称之为帧。分页的好处就是可以在主存不够的情况下把辅存给利用上。我们可以将暂时不用的主存页保存到辅存中,这样时候这块主存页便可以被我们覆写,需要的时候还可以从辅存中恢复。在安装linux系统的时候,如果内存偏小我们时常通过激活swap分区,增加虚拟内存空间。由局部性原理,速度上并不会差别太大。
并不是每一个虚拟内存页都有实际内存帧作为其后盾。如果没有对应的实际内存,便是缺页的情况。有个列外:虚拟页的数据全为0时,并不需要内存帧。只要有一个标记就可以了。
内存页和内存帧不一定是一对一关系,刚才说了有些内存页可能没有内存帧,有些内存帧可能会被多个内存页使用(多个内存页一般分属于多个进程,上面提到了一般进程面对的空间都是一样的)。换句话将,一个内存帧可以被多个内存页共享,再进一步可以被多个进程共享。典型的例子是库函数printf函数。每一个进程都会共享库函数printf(动态链接库),所以printf实际只有一个实例,每个进程的printf函数都在相同的内存帧中。
虽说内存页可以有内存帧作为其后盾也可以没有,但进程要想有效的访问内存页,该内存页必须要对应一个内存帧。实际情况是内存页的需求大于内存帧的实际大小。需求太大的实际原因——每一个进程都想独占整个物理内存。那该怎么解决这个问题呢?联想以下实际生活中的电梯。一个电梯最多容纳10人,而一栋楼有200号人。那我们是不是需要20个电梯才够?其实不然,或许两三个电梯就可以了。理由是:人不会总呆在电梯里面。再来看看我们的内存,内存页相当与人,内存帧则相当于电梯。帧不够了,页出来就行。内存页我们可以放到辅存中,比如磁盘。如果我们突然需要存储在辅存上的内存页时,再将辅存上的内存页与实际内存帧对应。这一行为可以叫做换页。
前面提到了缺页。缺页更严谨的讲是进程尝试访问一个没有内存帧对应的内存页时发生的一种错误。这是候内核会挂起该进程,进行一些调度把内存页和内存帧连接起来,然后再恢复进程。这被称为换进/faulting in。值得注意的是,这种情况并不是什么好事,会减慢程序的运行。页的换进换出做的操作是IO操作。
内存申请,很多人可能认为只有内存不够的时候才需要该操作。但反问一句,内存已经不够了,你上哪儿获取?实际上内存申请会追踪一个进程的数据的地址,确保相同地址的内存不会存进两个完全不同的数据。
进程申请内存有两种方式:exec、编程方式、[fork]。
Exec 可以为进程创建虚拟地址空间,将最基本程序部分加载进去,然后执行程序。一旦程序开始执行,程序使用编程的方式获取额外内存。GNU C库中有两种申请内存的方式:自动申请和动态申请。
内存映射I/O是一种动态虚拟内存申请方式。将虚拟内存的内容映射到IO设备上的常规文件。虚拟内存的任何修改都可以同步到IO上的常规文件。只有当我们访问到了该地址段的虚拟内存,我们才需要做IO读写、访问实际内存地址。所以这是一种非常有效率的读写方式。
进程可以用编程的方式申请内存,也可以释放内存,但是你无法释放以exec方式申请的内存。
虚拟内存按页管理,而进程的虚拟地址则按段管理。合起来称为断页式管理。一个段是一个连续的虚拟地址。一般有三个重要的段:
1、text segment:包含了程序的指令、字面值、还有静态常量。由exec申请,并在整个生命周期中保持相同的大小。
2、data segment:数据段作为程序的工作空间。可以事先有exec申请加载,也可以由进程以编程的方式扩展或缩小其空间大小。但不管你怎么扩大或缩小,本段都有一个固定的最小空间。
3、stack segment:栈段包含一个程序的栈空间。随着程序栈的扩大而扩大,但不会随其缩小而缩小。
glibc内存管理方式的更多相关文章
- 《Glibc内存管理》笔记DAY4
目录 分箱式内存管理 Small bins Large bins 内容来源 分箱式内存管理 对于空闲的 chunk,ptmalloc 采用分箱式内存管理方式,根据空闲 chunk 的大小和处于的状 ...
- 《Glibc内存管理》笔记DAY2
目录 Ptmalloc内存管理设计 Main_arena 与 non_main_arena chunk 的组织 空闲 chunk 容器 sbrk 与 mmap 内存分配概述 内存回收概述 边界标记法 ...
- glibc内存管理那些事儿
本文转载自glibc内存管理那些事儿 Linux内存空间简介 32位Linux平台下进程虚拟地址空间分布如下图: 进程虚拟地址空间分布 图中,0xC0000000开始的最高1G空间是内核地址空间,剩下 ...
- 2万字|30张图带你领略glibc内存管理精髓(因为OOM导致了上千万损失)
前言 大家好,我是雨乐. 5年前,在上家公司的时候,因为进程OOM造成了上千万的损失,当时用了一个月的时间来分析glibc源码,最终将问题彻底解决. 最近在逛知乎的时候,发现不少人有对malloc/f ...
- glusterfs 内存管理方式
glusterfs中的内存管理方式: 首先来看看glusterfs的内存管理结构吧: struct mem_pool { struct list_head list; int hot_count; i ...
- 24小时学通Linux内核之内存管理方式
昨天分析的进程的代码让自己还在头昏目眩,脑子中这几天都是关于Linux内核的,对于自己出现的一些问题我会继续改正,希望和大家好好分享,共同进步.今天将会讲诉Linux如何追踪和管理用户空间进程的可用内 ...
- windows内存管理方式以及优缺点
Windows内存管理方式:页式管理,段式管理,段页式管理 页式管理 将各进程的虚拟空间(逻辑地址)划分为若干个长度相等的页,业内管理把内存空间(物理内存)按照页的大小划分为片或者页面,从而实现了离散 ...
- 十天学Linux内核之第三天---内存管理方式
原文:十天学Linux内核之第三天---内存管理方式 昨天分析的进程的代码让自己还在头昏目眩,脑子中这几天都是关于Linux内核的,对于自己出现的一些问题我会继续改正,希望和大家好好分享,共同进步.今 ...
- ObjC如何通过runtime修改Ivar的内存管理方式
ObjC如何通过runtime修改Ivar的内存管理方式 为什么要这么做? 在iOS 9之前,UITableView(或者更确切的说是 UIScrollView)有一个众所周知的问题: propert ...
随机推荐
- 离线下载chrome
https://gallery.technet.microsoft.com/Google-Chrome-version-f0619a1f
- js进阶正则表达式13RegExp对象方法(RegExp对象的方法:compile,test,exec)(子表达式 var reg1=/([a-z]+)\d/)
js进阶正则表达式13RegExp对象方法(RegExp对象的方法:compile,test,exec)(子表达式 var reg1=/([a-z]+)\d/) 一.总结 1.RegExp对象有三个方 ...
- Android 基于Bmob平台数据管理常用方法整理
最近想搞一下基于Bmob平台的应用开发,发现确实挺方便的,很好的解决了服务器后台部署的难题, 但是也有一些弊端,数据架构的可扩展性不强,做一些数据结构简单的应用还是可以的. package com.b ...
- .NET-架构优化实战-梳理篇
原文:.NET-架构优化实战-梳理篇 前言 程序员输出是他敲写的代码,那么输入就是他思考好的设计.因此不做设计是不存在,设计只分优秀的设计和糟糕的设计.为了避免过度设计浪费成本,需要针对现有业务与问题 ...
- .Net Core身份认证:IdentityServer4实现OAuth 2.0 客户端模式 - 简书
原文:.Net Core身份认证:IdentityServer4实现OAuth 2.0 客户端模式 - 简书 一.客户端模式介绍 客户端模式(Client Credentials Grant)是指客户 ...
- [Node.js] Build microservices in Node.js with micro
micro is a small module that makes it easy to write high performance and asynchronous microservices ...
- [NPM] Run npm scripts in series
After creating several npm script it becomes useful to run multiple scripts back-to-back in series. ...
- 数据结构 Tricks(一)—— 父节点和左右孩子索引号之间的关系
如果以第 0 个位置开始标记树根节点,则第 i 个结点的左右孩子分别为: 2i+1 2i+2 反之,如果一个结点的标号为 i,则其父节点为: i/2:i 为左孩子结点: i/2-1:i 为右孩子结点: ...
- 关于生命周期里执行setState
React里生命周期的哪些方法里可以执行setState,这对于很多使用React很长时间的开发都是个迷惑的问题. 先看一下完整的生命周期. 再看两篇文章 React componentDidUpda ...
- Java SE学问Random
这篇文章是在网络上的文章内容摘要学习以及自己的小练习,感谢您的无私分享. 昨天在项目中想使用几个随机数.结果使用Random时竟然出现随机数同样的情况.忍不住查了些资料. 现将代码总结例如以下: pa ...