Buffer Pool扩展简介

Buffer Pool扩展是buffer pool 和非易失的SSD硬盘做连接。以SSD硬盘的特点来提高随机读性能。

在Buffer Pool 扩展之前,SQL Server 从磁盘中读入数据,并且存放在buffer pool中以供读取和修改,修改完之后脏数据还是放在buffer pool中,当内存紧张时,lazy write把脏数据写入磁盘,并且释放内存页。当再次使用当前数据时,再一次从磁盘读取数据到内存。这样会导致大量的IO操作,影响性能。对于这类IO操作频繁造成的性能问题,我们通常采用的方法是加内存,较少IO操作。

SQL SERVER 2014新增加了Buffer Pool的扩展特性,使用SSD硬盘扩展缓存容量;

SSD作为Buffer Pool的扩展,可以很好的解决因频繁读取数据引发的系统大量IO操作问题。 Buffer pool在SSD上创建一个缓冲文件,该文件与内存一起构成多层的缓存区,如下图:

其中第一层为内存构成的缓冲池,第二层为扩展的后备存储区。在L2上只存储干净的数据,为读提供缓存,不提供脏数据的缓存。这样的设计让我们不用担心SSD出现损坏的情况,当SSD出现损坏时,只是我们的缓存结构回到了加扩展前的状态,之前缓存在SSD上的数据,只需要从磁盘上再读取进内存。

Buffer Pool扩展实现

在SSD盘上设置扩展缓存区:

alter server configuration

set buffer pool extension on

(filename = 'I:\EXAMPLE.BPE', size= 4GB )

执行该命令后,在SSD盘上回生成一个EXAMPLE的文件,如下图:

撤销在SSD盘上设置的扩展缓存区:

alter server configuration

set buffer pool extension off

撤销缓冲池扩展后,将从注册表中删除所有相关的配置设置。SQL Server 实例关闭时,将会删除缓冲池扩展文件。

扩展缓存区注意事项

设置缓存区的时候,缓冲池扩展大小最大可为 max_server_memory 值的 32 倍。建议物理内存 (max_server_memory) 的大小与缓冲池扩展的大小之比不应超过 1:16。 介于 1:4 至 1:8 之间的比率是最佳的。

Buffer Pool扩展的优势

为了验证Buffer Pool扩展的作用,我们做了3个场景的数据读取,并对比磁盘物理读取次数与执行时间。

数据在磁盘上,从磁盘读取数据。

该种场景是在语句执行时,数据存储在磁盘上,执行步骤如下:

  • 使用 dbcc dropcleanbuffers 命令清空 Buffer  Pool 中的数据
  • 开启IO 统计 set statistics io on
  • 执行查询语句

从上图可以看出,当数据在磁盘上时,该查询执行了2次物理读即从磁盘读取了2页的数据。

从上图可以看出,该语句读持续了169毫秒。

数据在内存缓存中,从内存读取数据

该种场景是在语句执行时,数据在内存缓存上:

  • 执行查询语句,数据从磁盘读取到缓存
  • 开启IO 统计 set statistics io on
  • 再次执行语句,查看IO信息与执行时间

从上图可以看出,当数据在内存缓存上时,该查询执行了0次物理读。

从上图可以看出,该语句读持续了2毫秒。

数据在SSD扩展盘上有缓存,从SSD缓存读取数据

该种场景是在语句执行时,数据存储在Buffer Pool扩展 SSD硬盘上:

定位当前查询的数据所在的页,执行查询,使用 %%physloc%%获取当前记录行对应的标记信息(0x85E5000001000000)

标记信息是十六进制,将其转换为十进制数字,该标记0x后8为表示所在的页号;在转换的过程中这8位数字需要做个顺序调整,如上图中的值(0x85E5000001000000)需要转换为如下计算方式:

select cast(0x0000e585 as int )

获取页号后执行如下语句查看该页在Buffer Pool 中的情况。

select * from sys.dm_os_buffer_descriptors a where  a.page_id='58757'

从如上执行结果可以看出,58757 页对应的is_in_bpool_extension值为1,说明该页存储在Buffer Pool 扩展上。

执行查询语句,查看IO信息,如下图:

从上图可以看出,当数据在Buffer Pool 扩展有缓存时,该查询执行了0次物理读。

从上图可以看出,该语句读持续了49毫秒。

结论

通过同一环境中的如上三个场景测试,测试结果如图:

 

物理读次数

持续时间

数据页在磁盘

2次

169毫秒

数据页缓存在内存

0

2毫秒

数据页缓存在SSD Buffer Pool扩展

0

49毫秒

通过如上测试,我们知道使用SSD Buffer Pool扩展后,当内存不足时内存中的干净数据会移至SSD Buffer Pool扩展上,此时再次读取这些数据的时候降低了IO操作,并且读取时间较直接从硬盘读取数据快。

SQL SERVER Buffer Pool扩展的更多相关文章

  1. SQL Server 2014新特性——Buffer Pool扩展

    Buffer Pool扩展 Buffer Pool扩展是buffer pool 和非易失的SSD硬盘做连接.以SSD硬盘的特点来提高随机读性能. 缓冲池扩展优点 SQL Server读以随机读为主,S ...

  2. 如果正确读取SQL Server中的扩展事件?

        SQL Server中使用扩展事件捕捉所需的信息后,可以选择存放的位置.比如说内存或文件中,但无论存在哪里,其本质都是一个大XML.因此在SQL Server中读取该XML就是解析扩展事件结果 ...

  3. sql server 常用的扩展存储过程

    sql server 里面提供了丰富的系统存储过程来辅助我们管理数据库以及开发.今天分享介绍一些常用的数据库扩展存储过程 xp_cmdshell 这个大家都比较熟悉了,使用xp_cmdshell 可以 ...

  4. SQL SERVER中的扩展属性

    以前在SQL SERVER建表时,总看到扩展属性,但一直未使用过.今天研究下: 增加扩展属性: 语法: sp_addextendedproperty [ @name = ] { 'property_n ...

  5. SQL Server中的扩展事件学习系列

    SQL Server 扩展事件(Extented Events)从入门到进阶(1)——从SQL Trace到Extented Events SQL Server 扩展事件(Extented Event ...

  6. SQL Server -查看数据库扩展属性

    1.fn_listextendedproperty 函数可以基于对象类型显示单个数据库对象或数据库中所有对象的扩展属性.例如,可以返回表或表中所有列的扩展属性. A.下面的示例显示了数据库本身设置的所 ...

  7. SQL Server 2014新特性探秘(2)-SSD Buffer Pool Extension

    简介     SQL Server 2014中另一个非常好的功能是,可以将SSD虚拟成内存的一部分,来供SQL Server数据页缓冲区使用.通过使用SSD来扩展Buffer-Pool,可以使得大量随 ...

  8. SSD Buffer Pool Extension

    SSD Buffer Pool Extension 简介 SQL Server 2014中另一个非常好的功能是,可以将SSD虚拟成内存的一部分,来供SQL Server数据页缓冲区使用.通过使用SSD ...

  9. 浅谈SQL Server 对于内存的管理

    简介 理解SQL Server对于内存的管理是对于SQL Server问题处理和性能调优的基本,本篇文章讲述SQL Server对于内存管理的内存原理. 二级存储(secondary storage) ...

随机推荐

  1. kaggle

    注册kaggle可真所谓费劲心思,先是邮箱验证不来,换了两三个浏览器都不成功,非常恼火,没有验证码,最后还是FQ加谷歌浏览器,哎,注册之旅还是非常坎坷德,但是好消息是注册成功了.接下来是机器学习语言, ...

  2. python多线程几种方法实现

    python多线程编程 Python多线程编程中常用方法: 1.join()方法:如果一个线程或者在函数执行的过程中调用另一个线程,并且希望待其完成操作后才能执行,那么在调用线程的时就可以使用被调线程 ...

  3. 移动端车牌识别、行驶证识别OCR为共享汽车APP增添技术色彩

    本文主题:移动端车牌识别.行驶证识别OCR为共享汽车APP增添技术色彩 本文关键词:车牌识别,证件识别,移动端车牌识别,行驶证识别,手机车牌识别,驾驶证识别 近两年,随着共享单车以及共享电车的兴起,有 ...

  4. Jmeter-BeanShell PostProcessor提取请求及响应结果并保存到本地文件

    1.新建一个本地csv文件,存放请求需要使用的变量值account,password,并配置CSV Data Set Config 2.添加一个HTTP请求 3.添加正则提取器用来提取响应结果中的re ...

  5. php取出数组中的最大值

    <?php /** * @param $arr * @return mixed * php取出数组中的最大值(方法一) */ function getMax($arr){ $max=$arr[0 ...

  6. GC机制总结

    一.为什么需要GC 应用程序对资源操作,通常简单分为以下几个步骤: 1.为对应的资源分配内存 2.初始化内存 3.使用资源 4.清理资源 5.释放内存 应用程序对资源(内存使用)管理的方式,常见的一般 ...

  7. 遇到ANDROID “call to opengl es api with no current context”错误

    延迟线程执行 Timer timer=new Timer();//实例化Timer类 timer.schedule(new TimerTask(){ public void run(){ buyed( ...

  8. iOS- 解决iOS10 App启动时放大铺满App Icon的问题

    0.前言 iOS10 App启动时放大铺满App图标 iPad Application shows app icon as launch screen in iOS 10 如图,点击APP后APP图标 ...

  9. C# 模拟跑马灯效果(2种)

    #region 跑马灯效果方法 /// <summary> /// 文字进入左侧后从右侧出来 /// </summary> private void LabelRun() { ...

  10. XML 新手入门基础知识

    XML 是可扩展标记语言(Extensible Markup Language)的缩写,其中的 标记(markup)是关键部分.您可以创建内容,然后使用限定标记标记它,从而使每个单词.短语或块成为可识 ...