KSM: Kernel SamePage Merging 内核同页合并

简介

KSM允许内核在两个或多个进程(包括虚拟客户机)之间共享完全相同的内存页.

KSM让内核扫描检查正在运行中的程序,并比较他们的内存,如果发现他们有内存区域或内存页是完全相同的,就将多个相同的内存合并为一个单一的内存页,并将其标识为写时复制.这就可以起到节省系统内存使用量的作用.如果之后有进程需要修改被标识为"写时复制"的合并内存页时,就为该进程复制出一个新的内存页供其使用.

写时复制:在Linux中,当使用fork函数创建一个进程时,子进程与其父进程共享全部的内存,而当子进程或父进程试图修改他们的共享内存区域时,内核会分配一块新的内存区域,并将即将被修改的共享内存区域复制到新的内存区域上,然后让进程去修改复制的内存.这就是著名的写时复制.

优点

  1. 提高了缓存命中率,直接导致了操作系统/应用程序的运行速度

在KSM的帮助下,相同的内存页被合并了,减少了客户机的内存使用量,一方面,内存中的内容更容易被保存到到CPU的缓存当中;另一方面,有更多的内存可用于缓存一些磁盘中的数据。因此不管是内存的缓存命中率还磁盘数据的缓存命中率都会提高,从而提高了KVM客户机中操作系统或应用程序的运行速度.

  1. 通过降低客户机的内存用量,提高了虚拟化客户机部署的密度,提高了物理资源的利用效率

缺点

KSM必须有1个或多个进程去检测和找出哪些内存页是完全相同可以用于合并的,并且需要找到那些不会经常更新的可合并的内存页,这样的页才是最适合合并的.由于"可合并内存检测进程"的运行,使CPU使用率有一定程度提高,可能会带来隐蔽的性能问题.

优化及数据

客户机操作系统类型 & 客户机上应用类型

KSM节省的内存大小,与客户机操作系统类型以及其上运行的应用类型有关.

如果宿主机上的客户机操作系统全部相同,其上的应用程序也类似,节省内存的效果就会很显著,甚至节省超过50%的内存也有可能.

反之,如果客户机操作系统不尽相同,运行的应用程序也类型繁多,KSM节省效率就会不好,可能连5%也不会达到,这部分节省的内存,与由于可合并内存检测进程运行导致的CPU使用率升高,孰轻孰重难以衡量.

交换空间

使用KSM时最好保证宿主机的交换空间(SWAP SPACE)够大,因为KSM将不同客户机的相同内存页合并从而减少了内存使用量,但与此同时,客户机可能由于需要修改被KSM合并的内存页,使这些被修改的内存被重新复制出来占用内存空间,可能会导致系统内存的不足,因此需要足够的交换空间保证宿主机系统的正常运行.

参考资料

《KVM虚拟化技术实战与原理解析》

KSM概念学习的更多相关文章

  1. OutputCache概念学习

    目录 OutputCache概念学习 OutputCache属性详解(一) OutputCache属性详解(二) OutputCache属性详解(三) OutputCache属性详解(四)— SqlD ...

  2. 虚拟机NUMA和内存KSM

    KSM技术可以合并相同的内存页,即使是不同的NUMA节点,如果需要关闭跨NUMA节点的内存合并,设置/sys/kernel/mm/ksm/merge_across_nodes参数为0.或者可以关闭特定 ...

  3. 概念学习(Concept Learning)

    从特殊的训练样例中归纳出一般函数是机器学习的核心问题.一般函数是对理想目标函数的函数逼近(function approximation).简而言之,从特殊到普通.与此对应的是演绎推理(deductiv ...

  4. KSM剖析——Linux 内核中的内存去耦合

    简介: 作为一个系统管理程序(hypervisor),Linux® 有几个创新,2.6.32 内核中一个有趣的变化是 KSM(Kernel Samepage Merging)  允许这个系统管理程序通 ...

  5. 操作系统概念学习笔记 10 CPU调度

    操作系统概念学习笔记 10 CPU调度 多道程序操作系统的基础.通过在进程之间切换CPU.操作系统能够提高计算机的吞吐率. 对于单处理器系统.每次仅仅同意一个进程执行:不论什么其它进程必须等待,直到C ...

  6. 概念学习 - JNDI, JDBC, ODBC, DataSource

    layout: post title: 概念学习 - JNDI, JDBC, ODBC, DataSource --- 最近在学习Java Hibernate,对数据库资源访问这块好多概念模糊,所以在 ...

  7. SSH深度历险(十一) AOP原理及相关概念学习+xml配置实例(对比注解方式的优缺点)

    接上一篇 SSH深度历险(十) AOP原理及相关概念学习+AspectJ注解方式配置spring AOP,本篇我们主要是来学习使用配置XML实现AOP 本文采用强制的CGLB代理方式 Security ...

  8. SSH深度历险(十) AOP原理及相关概念学习+AspectJ注解方式配置spring AOP

    AOP(Aspect Oriented Programming),是面向切面编程的技术.AOP基于IoC基础,是对OOP的有益补充. AOP之所以能得到广泛应用,主要是因为它将应用系统拆分分了2个部分 ...

  9. Linux内存管理 (17)KSM

    专题:Linux内存管理专题 关键词:KSM.匿名页面.COW.madvise .MERGEABLE.UNMERGEABLE. KSM是Kernel Samepage Merging的意思,用于合并内 ...

随机推荐

  1. 22.firewalld

    1.firewalld 中常用的区域名称及策略规则 2.firewalld-cmd 命令中使用的参数以及作用 与 Linux 系统中其他的防火墙策略配置工具一样,使用firewalld 配置的防火墙策 ...

  2. CCF CSP 202012-3 文件配额

    题目背景 小 H 同学发现,他维护的存储系统经常出现有人用机器学习的训练数据把空间占满的问题,十分苦恼. 查找了一阵资料后,他想要在文件系统中开启配额限制,以便能够精确地限制大家在每个目录中最多能使用 ...

  3. Effective Java读书笔记--创建和销毁对象

    1.优先考虑用静态工厂方法代替构造器2.遇到多个构造器参数时要考虑使用构建器Builder解决参数过多,不可变类型.私有构造方法,静态类的构造方法提供必要参数,剩下可选.new xxx.build() ...

  4. 设计模式(十五)——命令模式(Spring框架的JdbcTemplate源码分析)

    1 智能生活项目需求 看一个具体的需求 1) 我们买了一套智能家电,有照明灯.风扇.冰箱.洗衣机,我们只要在手机上安装 app 就可以控制对这些家电工作. 2) 这些智能家电来自不同的厂家,我们不想针 ...

  5. vue后台管理系统遇到的注意事项以及总结

    地址栏加#号问题:Vue-router 中有hash模式和history模式,vue的路由默认是hash模式,一般开发的单页应用的URL都会带有#号的hash模式第一步在router/index.js ...

  6. Codeforces Round #668 (Div. 2)【ABCD】

    比赛链接:https://codeforces.com/contest/1405 A. Permutation Forgery 题意 给出一个大小为 $n$ 的排列 $p$,定义 \begin{equ ...

  7. 1、Django框架目录介绍

    1.windows上安装django pip install django==1.10.3 安装完成后:django-admin.exe 默认存放路径:C:\Users\licl11092\AppDa ...

  8. Docker运行时资源限制

    Docker 运行时资源限制Docker 基于 Linux 内核提供的 cgroups 功能,可以限制容器在运行时使用到的资源,比如内存.CPU.块 I/O.网络等. 内存限制概述Docker 提供的 ...

  9. docker-理论题01

    1.什么是docker?答:docker是开源的应用容器引擎:开发人员把他们的应用及依赖包打包发布到容器当中. 2.docker和VMware的区别? 答:docker是半解耦,VMware是解耦:d ...

  10. Spring(三) Spring IOC 初体验

    Web IOC 容器初体验 我们还是从大家最熟悉的 DispatcherServlet 开始,我们最先想到的还是 DispatcherServlet 的 init() 方法.我们发现在 Dispath ...