mysql-定时对表分区
1, 分区
具体可见: http://blog.csdn.net/open_data/article/details/46893331
1, 分区类型:
RANGE分区:基于属于一个给定连续区间的列值,把多行分配给分区。
LIST分区:类似于按RANGE分区,区别在于LIST分区是基于列值匹配一个离散值集合中的某个值来进行选择。
HASH分区:基于用户定义的表达式的返回值来进行选择的分区,该表达式使用将要插入到表中的这些行的列值进行计算。这个函数可以包含MySQL 中有效的、产生非负整数值的任何表达式。
KEY分区:类似于按HASH分区,区别在于KEY分区只支持计算一列或多列,且MySQL服务器提供其自身的哈希函数。必须有一列或多列包含整数值。
2), 为什么分区
为了改善大型表以及具有各种访问模式的表的可伸缩性,可管理性和提高数据库效率。
分区的一些优点包括:
- 与单个磁盘或文件系统分区相比,可以存储更多的数据。
- 对于那些已经失去保存意义的数据,通常可以通过删除与那些数据有关的分区,很容易地删除那些数据。相反地,在某些情况下,添加新数据的过程又可以通过为那些新数据专门增加一个新的分区,来很方便地实现。通常和分区有关的其他优点包括下面列出的这些。MySQL分区中的这些功能目前还没有实现,但是在我们的优先级列表中,具有高的优先级;我们希望在5.1的生产版本中,能包括这些功能。
- 一些查询可以得到极大的优化,这主要是借助于满足一个给定WHERE语句的数据可以只保存在一个或多个分区内,这样在查找时就不用查找其他剩余的分区。因为分区可以在创建了分区表后进行修改,所以在第一次配置分区方案时还不曾这么做时,可以重新组织数据,来提高那些常用查询的效率。
- 涉及到例如SUM()和COUNT()这样聚合函数的查询,可以很容易地进行并行处理。这种查询的一个简单例子如 “SELECT salesperson_id, COUNT (orders) as order_total FROM sales GROUP BY salesperson_id;”。通过“并行”,这意味着该查询可以在每个分区上同时进行,最终结果只需通过总计所有分区得到的结果。
- 通过跨多个磁盘来分散数据查询,来获得更大的查询吞吐量。
3), 查看分区
SELECT
partition_name part,
partition_expression expr,
partition_description descr,
table_rows
FROM
INFORMATION_SCHEMA.partitions
WHERE
TABLE_SCHEMA = schema()
AND TABLE_NAME='table';
或者
select partition_name, subpartition_name, table_rows
from information_schema.partitions
where table_name = 'jmx_sta';
2, 事件
具体可见:
http://blog.csdn.net/jesseyoung/article/details/35257527
https://www.cnblogs.com/zoro-zero/p/6511203.html
2.1, 查看事件的开启状态
show variables like '%event_schedule%';

2.2, 将事件更改为开启状态
set global event_scheduler = ON;
2.3 查看调度事件
show processlist;
2.4 查看事件
show events;
2.5 删除事件
drop event if exists event_second;
添加定时分区任务
1), 创建表并初始化分区(必须有初始化分区)
DROP TABLE IF EXISTS `jmx_sta`;
CREATE TABLE `jmx_sta` (
`host` varchar() DEFAULT NULL COMMENT '主机',
`time` TIMESTAMP NULL DEFAULT '0000-00-00 00:00:00',
`object` varchar() DEFAULT NULL COMMENT '对象',
`attribute` varchar() DEFAULT NULL COMMENT '属性',
`value` DOUBLE,
PRIMARY KEY (`host`, `time`, `object`, `attribute`)
) ENGINE=InnoDB CHARSET=utf8
PARTITION BY RANGE (unix_timestamp(time)) (
PARTITION p20171231 VALUES LESS THAN (unix_timestamp('2017-12-31 23:59:59')),
PARTITION p20180101 VALUES LESS THAN (unix_timestamp('2018-01-01 23:59:59')),
PARTITION p20180102 VALUES LESS THAN (unix_timestamp('2018-01-02 23:59:59'))
);
2), 添加存储过程
DELIMITER $$
USE `iris`$$ #使用库
DROP PROCEDURE IF EXISTS `create_Partition_jmx_status`$$
CREATE DEFINER=`iris_admin`@`.%` PROCEDURE `create_Partition_jmx_status`() # grant的授权
BEGIN
#DECLARE EXIT HANDLER FOR SQLEXCEPTION ROLLBACK;
START TRANSACTION;
SELECT REPLACE(partition_name,'p','') INTO @P12_Name FROM INFORMATION_SCHEMA.PARTITIONS
WHERE table_name='jmx_status' ORDER BY partition_ordinal_position DESC LIMIT ;
SET @Max_date= DATE(DATE_ADD(@P12_Name+, INTERVAL DAY))+;
SET @s1=CONCAT('ALTER TABLE jmx_status ADD PARTITION (PARTITION p',@Max_date,' VALUES LESS THAN (unix_timestamp (''',DATE(@Max_date),' 23:59:59'')))');
SELECT @s1;
PREPARE stmt2 FROM @s1;
EXECUTE stmt2;
DEALLOCATE PREPARE stmt2;
COMMIT ;
END$$
DELIMITER ;
3, 添加定时事件
DELIMITER ||
CREATE EVENT Partition_jmx_status_perday
ON SCHEDULE
EVERY day STARTS '2018-01-05 23:59:50'
DO
BEGIN
CALL `create_Partition_jmx_status`;
END ||
DELIMITER ;
添加定时删除分区任务:
CREATE DEFINER=`iris_admin`@`.%` PROCEDURE `delete_Partition_jmx_status`()
BEGIN
#DECLARE EXIT HANDLER FOR SQLEXCEPTION ROLLBACK;
START TRANSACTION;
SELECT REPLACE(partition_name,'p','') INTO @P13_Name FROM INFORMATION_SCHEMA.PARTITIONS WHERE table_name='jmx_status' ORDER BY partition_ordinal_position DESC LIMIT ;
SET @Min_date= DATE(DATE_SUB(@P13_Name+, INTERVAL DAY))+;
SET @s2=CONCAT('ALTER TABLE jmx_status DROP PARTITION p',@Min_date);
SELECT @s2;
PREPARE stmt2 FROM @s2;
EXECUTE stmt2;
DEALLOCATE PREPARE stmt2;
COMMIT ;
END
2, 定时调用
在上一个的定时任务中, 在调用一次:
BEGIN
CALL `create_Partition_jmx_status`;
CALL `delete_Partition_jmx_status`;
END
mysql-定时对表分区的更多相关文章
- zabbix使用mysql数据库 对表分区
zabbix删除历史数据 mysql 表自动分区.删除 ----2016年终总结 二 zabbix清理历史数据是个比较蛋疼的问题,尤其在监控数据较多时,一方面无法彻底释放历史数据空间,一方面数据库删除 ...
- MYSQL定时创建表分区
MYSQL定时创建表分区 一.存储过程-表分区-----------------------------------------------------------------需求: 每月创建一个分区 ...
- MySQL的表分区详解
这篇文章主要介绍了MySQL的表分区,例如什么是表分区.为什么要对表进行分区.表分区的4种类型详解等,需要的朋友可以参考下 一.什么是表分区通俗地讲表分区是将一大表,根据条件分割成若干个小表.mysq ...
- MySQL的表分区(转载)
MySQL的表分区(转载) 一.什么是表分区 通俗地讲表分区是将一大表,根据条件分割成若干个小表.mysql5.1开始支持数据表分区了. 如:某用户表的记录超过了600万条,那么就可以根据入库日期将表 ...
- MySQL数据库表分区功能详解
1.什么是表分区? mysql数据库中的数据是以文件的形势存在磁盘上的,默认放在/mysql/data下面(可以通过my.cnf中的datadir来查看),一张表主要对应着三个文件,一个是frm存放表 ...
- mysql数据库表分区详解(数量过大的数据库表通过分区提高查询速度)
这篇文章主要介绍了MySQL的表分区,例如什么是表分区.为什么要对表进行分区.表分区的4种类型详解等,需要的朋友可以参考下 一.什么是表分区通俗地讲表分区是将一大表,根据条件分割成若干个小表.mysq ...
- mysql中的分区
第18章:分区 目录 18.1. MySQL中的分区概述 18.2. 分区类型 18.2.1. RANGE分区 18.2.2. LIST分区 18.2.3. HASH分区 18.2.4. KEY分区 ...
- mysql优化之分区
mysql分区类型 日常开发中我们经常会遇到大表的情况,所谓的大表是指存储了百万级乃至千万级条记录的表.这样的表过于庞大,导致数据库在查询和插入的时候耗时太长,性能低下,如果涉及联合查询的情况,性能会 ...
- MySQL定时执行脚本(计划任务)命令实例
在mysql中我们可以直接进行一些参数设置让它成定时为我们执行一些任务了,这个虽然可以使用windows或者linux中的计划任务实现,但是mysql本身也能完成 查看event是否开启 复制代码 代 ...
随机推荐
- set_time_limit
语法 : void set_time_limit (int seconds)说明 : 设定一个程式所允许执行的秒数,如果到达限制的时间,程式将会传回错误.它预设的限制时间是30秒,max_execut ...
- Anroid 手机助手 详细解析 概述(二)
这篇主要说一下手机插入之后的一些动作. 1) 捕获窗口消息 插入拔出一个USB设备windows 会给所有的窗口发送特定的消息,只要我们捕获这些消息就可以处理设备插入和拔出.需要注意的是插入或者拔出 ...
- [C# 开发技巧]如何防止程序多次运行
一.引言 最近发现很多人在论坛中问到如何防止程序被多次运行的问题的,如: http://social.msdn.microsoft.com/Forums/zh-CN/6398fb10-ecc2-4c0 ...
- 输出的数据格式是如何决定的-------Asp.net WebAPI学习笔记(二)
在上一篇文章<路由其实也可以很简单>,我们解决了路由问题,这篇文章,我们来研究剩下的另一个问题,为何我们的方法返回的是一个列表,输出到客户端的时候,变成json呢,大家应该还记得我们上一篇 ...
- 小猴打架(luogu4430)(数论+生成树计数)
一开始森林里面有\(N\)只互不相识的小猴子,它们经常打架,但打架的双方都必须不是好朋友.每次打完架后,打架的双方以及它们的好朋友就会互相认识,成为好朋友.经过\(N-1\)次打架之后,整个森林的小猴 ...
- 聚合和分组F,Q和事物,cookie,session
聚合 aggregate()是QuerySet 的一个终止子句,意思是说,它返回一个包含一些键值对的字典. 键的名称是聚合值的标识符,值是计算出来的聚合值.键的名称是按照字段和聚合函数的名称自动生成出 ...
- VNC黑屏解决办法
在Linux里安装配置完VNC服务端,发现多用户登陆会出现黑屏的情况,具体的现象为:客户端可以通过IP与会话号登陆进入系统,但登陆进去是漆黑一片,除了一个叉形的鼠标以外,伸手不见五指. 原因:用户的V ...
- MySQL 并行复制(MTS) 从库更新的记录不存在实际却存在
目录 背景 版本 分析 测试 背景 开了并行复制的半同步从库SQL 线程报1032错误,异步复制从库没有报错,偶尔会出现这种 版本 mysql 5.7.16 redhat 6.8 mysql> ...
- jquery中ajax的几种方式
三种简写: $.get(URL,data,function(data,status,xhr),dataType) $(selector).post(URL,data,function(data,sta ...
- sql开启远程访问
我们用的是SQL Server 数据库 2008 版本,数据库配置完之后从另一台电脑访问数据库死活连接不上,提示信息如下 “ 无法连接到 *.*.*.*. 在于SQL Server建立连接时出现与网络 ...