释放innodb空间

记一次MySQL运维

[root@b2btest ~]# free -h
             total       used       free     shared    buffers     cached
Mem:          125G       124G       780M        13M        28K       238M
-/+ buffers/cache:       124G       1.0G
Swap:          30G       .5G        22G

分析现象；

首先，可以看到，free部分已经严重不足，swap被大量启用。

而另一方面，cached部分的数据量非常低，而几乎所有的内存资源都被-/+ buffers/cache部分used，

初步分析：

buffer pool的设置过高，所有的数据都默认存储进了buffer pool中。在我的另一篇文章中，介绍了上面各个参数的含义，第一行的buffer指的是未被使用的量。

这导致了两个问题；

一个是内存资源被大量占用，free部分严重不足。

另一个是缓存区没有得到使用，因为所有数据都优先导入了buffer pool中。

因为缓存区没有被使用，所以即使内存的free部分已经不够用了，系统缓存也无法自动释放空间。

当这个矛盾产生后，系统就开始启用swap分区。

解决思路：

将数据，从buffer pool与swap里，全部挤压出来到cached中。再将 cached中的数据释放到磁盘内。使得内存中的空间得到释放。

先找到占用的具体进程

top - :: up  days, :,   users,  load average: 2.67, 2.04, 1.97
Tasks:  total,    running,  sleeping,    stopped,    zombie
%Cpu(s): 10.2 us,  0.6 sy,  0.0 ni, 89.2 id,  0.0 wa,  0.0 hi,  0.1 si,  0.0 st
KiB Mem:  +total, +used,    free,        buffers
KiB Swap:  total,   used,  free.    cached Mem

   PID USER      PR  NI    VIRT    RES    SHR S  %CPU %MEM     TIME+ COMMAND
 mysql          .130t .117t    S 129.1 95.3  : mysqld  

这是台mysql专用服务器，系统资源全部被MySQL占用，要释放内存，就业从MySQL内部解决；

mysql> show engines;
+--------------------+---------+----------------------------------------------------------------+--------------+------+------------+
| Engine             | Support | Comment                                                        | Transactions | XA   | Savepoints |
+--------------------+---------+----------------------------------------------------------------+--------------+------+------------+
| InnoDB             | DEFAULT | Supports transactions, row-level locking, and foreign keys     | YES          | YES  | YES    

默认存储引擎为innodb,

mysql> show engine innodb status;
截取以下段落
----------------------
BUFFER POOL AND MEMORY
----------------------
Total large memory allocated
Dictionary memory allocated
Buffer pool size
Free buffers
Database pages
Old database pages 2657374

找到原因。开始处理

mysql>  show variables like "%innodb_buffer_pool%";

截取以下参数
+-------------------------------------+----------------+
| Variable_name                       | Value          |
+-------------------------------------+----------------+
| innodb_buffer_pool_chunk_size       |       |
| innodb_buffer_pool_instances        |               |
| innodb_buffer_pool_size             |    |
+-------------------------------------+----------------+
 rows in set (0.00 sec)

mysql> select -**;
计划释放50倍的数据块
+-----------------------------+
| -** |
+-----------------------------+
|                  |
+-----------------------------+
 row in set (0.00 sec)

mysql>  SET GLOBAL innodb_buffer_pool_size=;
Query OK,  rows affected (0.00 sec)
将112G的内存降低至60G

之后查看下系统内存。free -h。确认下修改是否生效

[root@b2btest ~]# free -h
             total       used       free     shared    buffers     cached
Mem:          125G       124G       839M        15M        40K        47G
-/+ buffers/cache:        77G        48G
Swap:          30G       .4G        22G

从这里已经可以看到，可用缓存空间已经增加了50G左右，接下来释放SWAP文件

[root@b2btest ~]# swapoff -a

7.5G的swap文件，释放需要5个小时!!,从这里也可以明显体会到swap文件系统运行的缓慢。

[root@b2btest ~]# free -h
             total       used       free     shared    buffers     cached
Mem:          125G       124G       742M       459M        60K        41G
-/+ buffers/cache:        83G        41G
Swap:           0B         0B         0B

现在所有的数据，都已经被转移到cached中，接下来，释放缓存。

[root@b2btest ~]# sync
[root@b2btest ~]# echo  > /proc/sys/vm/drop_caches
[root@b2btest ~]# free -h
             total       used       free     shared    buffers     cached
Mem:          125G        83G        42G       459M         0B        42M
-/+ buffers/cache:        83G        42G
Swap:           0B         0B         0B

从缓存区释放40G数据，用时10秒左右。

[root@b2btest ~]# swapon -a
[root@b2btest ~]# swapon -s
文件名                         类型            大小             已用    权限
/dev/sda3                     partition                       -

重启swap分区。

在数据库保持正常运行的情况下，系统资源释放结束。