按月分表(create table)
PHP 按月分表控制台命令(yii2版)
<?php
/**
* @Purpose: 按月分表脚本
* @User: Chrdai
* @Date: 2019/3/19
* @Time: 15:23
*/
namespace app\commands; use yii\console\Controller; class CreateTableController extends Controller
{
/**
* @var string 数据库服务器
*/
const HOST = '127.0.0.1'; /**
* @var string 用户名
*/
const USERNAME = 'root'; /**
* @var string 密码
*/
const PASSWORD = 'testpasswd'; /**
* @var string 数据库
*/
const DBNAME = 'test'; /**
* @var string 默认方法
*/
public $defaultAction = 'create-table-by-month'; public function options($actionID)
{
return parent::options($actionID);
} /**
* @purpose: 准备表前缀和表结构
* @author: Chrdai
* @time: 2019-03-19
* @return array
*/
public function prepare()
{
$userPrefix = 'user_';
$userSql = <<<EOF
(
id int(11) NOT NULL AUTO_INCREMENT,
name varchar(32) NOT NULL DEFAULT '' COMMENT '姓名',
created_at datetime DEFAULT CURRENT_TIMESTAMP COMMENT '创建时间',
updated_at datetime DEFAULT null COMMENT '更新时间',
PRIMARY KEY (id)
) CHARACTER SET utf8 COLLATE utf8_general_ci ENGINE=InnoDB AUTO_INCREMENT=1 DEFAULT CHARSET=utf8 COMMENT '用户表';
EOF; return [
[
'table_prefix' => $userPrefix,
'sql' => $userSql,
],
];
} /**
* @purpose: 如果网络可用,则进行一次时间同步
* @author: Chrdai
* @time: 2019-03-19
*/
public function updateToCurrentTime()
{
//ping 3 次
passthru('ping baidu.com -c 3 >/dev/null 2>&1',$res);
if($res === 0){
system('ntpdate asia.pool.ntp.org && hwclock --systohc');
}
} /**
* @purpose: 按月分表
* #表命名方案:table_prefix_年月_序号
* #每月的表1是保存1---15日的数据,表2是保存16--31日的数据
* @author: Chrdai
* @time: 2019-03-19
*/
public function actionCreateTableByMonth()
{
//登录mysql
$mysqlLoginInfo = '-h'.self::HOST.' -u'.self::USERNAME.' -p'.self::PASSWORD . ' -D'.self::DBNAME;
$createHead = "CREATE TABLE IF NOT EXISTS ";
$this->updateToCurrentTime();
$arrTable = $this->prepare();
$year = date('Y',time());
$month = date('m',time());
// 创建本月的表
foreach($arrTable as $val){
//每月2张表
for($i = 1; $i <=2 ; $i ++){
$tableName = $val['table_prefix'] . $year . $month . '_' . $i;
$sql = end($val);
system("/usr/bin/mysql {$mysqlLoginInfo} -e \"{$createHead} {$tableName} {$sql}\"");
}
} //创建下个月的表,如果跨年需要单独处理
if(intval($month) == 12){
$nextYear = $year + 1;
foreach($arrTable as $val){
for($i = 1; $i <=2 ; $i ++){
//下一年1月份的表名
$tableName = $val['table_prefix'] . $nextYear . '01_' . $i;
$sql = end($val);
system("/usr/bin/mysql {$mysqlLoginInfo} -e \"{$createHead} {$tableName} {$sql}\"");
}
}
}else{
$nextMonth = intval($month) + 1;
//下个月的表名
$fullMonth = $nextMonth < 10 ? '0' . $nextMonth : $nextMonth;
foreach($arrTable as $val){
for($i = 1; $i <=2 ; $i ++){
$tableName = $val['table_prefix'] . $year . $fullMonth . '_' . $i;
$sql = end($val);
system("/usr/bin/mysql {$mysqlLoginInfo} -e \"{$createHead} {$tableName} {$sql}\"");
}
}
}
}
}
分表规则为:
每月分两张表.
1-15号为 table_prefix_Ym_1 ,
16-31号为table_prefix_Ym_2 ,
如:table_prefix_201903_1
<?php
/**
* @purpose: 根据时间范围获取表名
* @explain: 表名的分表规则是,每月分两张表,1-15号为 table_prefix_Ym_1 ,16-31号为table_prefix_2 , 如:table_prefix_201903_1
* User: Chrdai
* Date: 2019/3/5
* Time: 18:08
*/ class TablePrefix
{
/**
* @const app调用记录表前缀
*/
const PREFIX= 'table_prefix_'; /**
* @purpose:获取指定时间范围内的app调用记录表
* @param int|string $starttime 开始时间
* @param int|string $endtime 结束时间
* @return array $tables 指定时间范围内的应用程序记录表
*/
public static function getTableByDateRange($starttime,$endtime)
{
$tables = [];
if(!empty($starttime)){
$start = is_numeric($starttime) ? date('Ymd',$starttime) : date('Ymd',strtotime($starttime));
}
if(!empty($endtime)){
$end = is_numeric($endtime) ? date('Ymd',$endtime) : date('Ymd',strtotime($endtime));
}
if(!empty($start) && !empty($end)){
$prev = floor($start / 100);
$next = floor($end / 100);
//开始时间小于等于结束时间范围内的表都房间$tables
while ($prev <= $next){
$tables[] = self::PREFIX . $prev. '_1';
$tables[] = self::PREFIX . $prev. '_2';
$prev = ($prev % 100 === 12) ? ((floor($prev/100) + 1) * 100 +1) : $prev + 1; //对夸年的月份做特殊处理
} //以15天为分界线,分上下月,去除重复的表
if($start % 100 > 15){
array_shift($tables);
}
if($end % 100 <= 15){
array_pop($tables);
}
}
return $tables;
}
}
//获取表名
$tables = TablePrefix::getTableByDateRange('2019-03-05 12:00:00','2019-03-05 14:00:00');
//循环处理各个表中的数据
$table = array_shift($tables); // 首先拿出第一张表中的数据
while(true){
__loop: //...... (每张表的业务逻辑) // 如果$tables中没有表了,则跳出循环,否则循环处理
if(empty($tables)){
break;
}else{
$table = array_shift($tables);
goto __loop;
}
}
此文为袋鼠(Chrdai)工作中所几记,如有转载请注明出处:https://www.cnblogs.com/chrdai/p/10551175.html
按月分表(create table)的更多相关文章
- Mycat(5):聊天消息表数据库按月分表实践,平滑扩展
本文的原文连接是: http://blog.csdn.net/freewebsys/article/details/47003577 未经博主同意不得转载. 1,业务需求 比方一个社交软件,比方像腾讯 ...
- 用复制方式创建表 Create Table tbname as select * from user.tab where ...
用复制方式创建表 Create Table tbname as select * from user.tab where ...
- mysql如何查询多样同样的表/sql分表查询、java项目日志表分表的开发思路/按月分表
之前开发的一个监控系统,数据库的日志表是单表,虽然现在数据还不大并且做了查询sql优化,不过以后数据库的日志表数据肯定会越来越庞大,将会导致查询缓慢,所以把日志表改成分表,日志表可以按时间做水平分表, ...
- mysql 创建表 create table详解
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 ...
- Oracle 创建表 Create Table...
一.创建表 主键约束primary key 约束条件,唯一且非空,一个表中只能有一个主键:有多个字段联合作为主键时,合在一起唯一标识记录,叫做联合主键. 外键约束 foreign key 受另外一张表 ...
- mysql 事件 按月分表
/****** 对象: Table Order_201512 脚本日期: 2015/12/18 11:44:23 ******/ /****** 字段数据长度 = 2599 字节 ******/ CR ...
- 根据查询结果创建新表create table .. as (select....)
一张表 student 查询数学和英语都是90分以上的同学,并创建一张新表 test1
- mysql按月分表, 组合查询
每个月月底最后一天建好下个月的空表 或每年底建1到12月的空表 , table_201901,table_201902,table_201903 增加记录不需要修改,insert到当月对应表就好了. ...
- Mysql数据库进阶之(分表分库,主从分离)
前言:数据库的优化是一个程序员的分水岭,作为小白我也得去提前学习这方面的数据的 (一) 三范式和逆范式 听起范式这个迟非常专业我来举个简单的栗子: 第一范式就是: 把能够关联的每条数据都拆分成一个 ...
随机推荐
- SpringMVC+Apache Shiro+JPA(hibernate)整合配置
序: 关于标题: 说是教学,实在愧不敢当,但苦与本人文笔有限,实在找不到更合理,谦逊的词语表达,只能先这样定义了. 其实最真实的想法,只是希望这个关键词能让更多的人浏览到这篇文章,也算是对于自己写文章 ...
- mysql基础学习
二.操作表 1.自行创建测试数据: -- 创建数据库create database practice charset utf8;-- 1.自行创建测试数据:---- 创建班级表:classcreate ...
- 2018-2019-2 《网络对抗技术》Exp0 Kali安装 Week1 20165237
2018-2019-2 <网络对抗技术>Exp0 Kali安装 Week1 20165237 安装虚拟机 首先创建虚拟机 创建好虚拟机后,打开虚拟机进行安装.第一步选择Graphcal i ...
- 读spring源码(二)-XmlBeanDefinitionReader-解析BeanDefinition
上次说到ApplicationContext加载BeanDefinition时会创建一个XmlBeanDefinitionReader,将XML解析.BeanDefinition加载委托给XmlBea ...
- redis集群伸缩【转】
一:实验介绍 在不影响集群对外服务的情况下,可以为集群添加节点进行扩容,也可以下线部分节点进行缩容. 原理可以抽象为槽和对应数据在不同节点之间灵活移动. 如果希望加入一个节点来实现集群扩容时,需要通过 ...
- grep、awk、sed的巩固练习
作者:邓聪聪 提取日志或文本中的关键内容 Apr :: localhost NetworkManager[]: <info> (eno16777736): Activation: star ...
- docker安装小笔记
作者:邓聪聪 yum update Docker 要求 CentOS 系统的内核版本高于 3.10 ,查看本页面的前提条件来验证你的CentOS 版本是否支持 Docker docker卸载旧版本(如 ...
- jmeter发起form-data格式
两者缺一不可,等下再来研究..
- IDEA中执行MAVEN命令打jar包
SpringBoot Jar包打包 1.工程POM配置packaging为jar. <packaging>jar</packaging> 2.增加MAVEN运行配置 添加MAV ...
- wireshark & fiddler
wireshark display filterhttps://www.wireshark.org/docs/wsug_html_chunked/ChWorkBuildDisplayFilterSec ...