按月分表(create table)
PHP 按月分表控制台命令(yii2版)
<?php
/**
* @Purpose: 按月分表脚本
* @User: Chrdai
* @Date: 2019/3/19
* @Time: 15:23
*/
namespace app\commands; use yii\console\Controller; class CreateTableController extends Controller
{
/**
* @var string 数据库服务器
*/
const HOST = '127.0.0.1'; /**
* @var string 用户名
*/
const USERNAME = 'root'; /**
* @var string 密码
*/
const PASSWORD = 'testpasswd'; /**
* @var string 数据库
*/
const DBNAME = 'test'; /**
* @var string 默认方法
*/
public $defaultAction = 'create-table-by-month'; public function options($actionID)
{
return parent::options($actionID);
} /**
* @purpose: 准备表前缀和表结构
* @author: Chrdai
* @time: 2019-03-19
* @return array
*/
public function prepare()
{
$userPrefix = 'user_';
$userSql = <<<EOF
(
id int(11) NOT NULL AUTO_INCREMENT,
name varchar(32) NOT NULL DEFAULT '' COMMENT '姓名',
created_at datetime DEFAULT CURRENT_TIMESTAMP COMMENT '创建时间',
updated_at datetime DEFAULT null COMMENT '更新时间',
PRIMARY KEY (id)
) CHARACTER SET utf8 COLLATE utf8_general_ci ENGINE=InnoDB AUTO_INCREMENT=1 DEFAULT CHARSET=utf8 COMMENT '用户表';
EOF; return [
[
'table_prefix' => $userPrefix,
'sql' => $userSql,
],
];
} /**
* @purpose: 如果网络可用,则进行一次时间同步
* @author: Chrdai
* @time: 2019-03-19
*/
public function updateToCurrentTime()
{
//ping 3 次
passthru('ping baidu.com -c 3 >/dev/null 2>&1',$res);
if($res === 0){
system('ntpdate asia.pool.ntp.org && hwclock --systohc');
}
} /**
* @purpose: 按月分表
* #表命名方案:table_prefix_年月_序号
* #每月的表1是保存1---15日的数据,表2是保存16--31日的数据
* @author: Chrdai
* @time: 2019-03-19
*/
public function actionCreateTableByMonth()
{
//登录mysql
$mysqlLoginInfo = '-h'.self::HOST.' -u'.self::USERNAME.' -p'.self::PASSWORD . ' -D'.self::DBNAME;
$createHead = "CREATE TABLE IF NOT EXISTS ";
$this->updateToCurrentTime();
$arrTable = $this->prepare();
$year = date('Y',time());
$month = date('m',time());
// 创建本月的表
foreach($arrTable as $val){
//每月2张表
for($i = 1; $i <=2 ; $i ++){
$tableName = $val['table_prefix'] . $year . $month . '_' . $i;
$sql = end($val);
system("/usr/bin/mysql {$mysqlLoginInfo} -e \"{$createHead} {$tableName} {$sql}\"");
}
} //创建下个月的表,如果跨年需要单独处理
if(intval($month) == 12){
$nextYear = $year + 1;
foreach($arrTable as $val){
for($i = 1; $i <=2 ; $i ++){
//下一年1月份的表名
$tableName = $val['table_prefix'] . $nextYear . '01_' . $i;
$sql = end($val);
system("/usr/bin/mysql {$mysqlLoginInfo} -e \"{$createHead} {$tableName} {$sql}\"");
}
}
}else{
$nextMonth = intval($month) + 1;
//下个月的表名
$fullMonth = $nextMonth < 10 ? '0' . $nextMonth : $nextMonth;
foreach($arrTable as $val){
for($i = 1; $i <=2 ; $i ++){
$tableName = $val['table_prefix'] . $year . $fullMonth . '_' . $i;
$sql = end($val);
system("/usr/bin/mysql {$mysqlLoginInfo} -e \"{$createHead} {$tableName} {$sql}\"");
}
}
}
}
}
分表规则为:
每月分两张表.
1-15号为 table_prefix_Ym_1 ,
16-31号为table_prefix_Ym_2 ,
如:table_prefix_201903_1
<?php
/**
* @purpose: 根据时间范围获取表名
* @explain: 表名的分表规则是,每月分两张表,1-15号为 table_prefix_Ym_1 ,16-31号为table_prefix_2 , 如:table_prefix_201903_1
* User: Chrdai
* Date: 2019/3/5
* Time: 18:08
*/ class TablePrefix
{
/**
* @const app调用记录表前缀
*/
const PREFIX= 'table_prefix_'; /**
* @purpose:获取指定时间范围内的app调用记录表
* @param int|string $starttime 开始时间
* @param int|string $endtime 结束时间
* @return array $tables 指定时间范围内的应用程序记录表
*/
public static function getTableByDateRange($starttime,$endtime)
{
$tables = [];
if(!empty($starttime)){
$start = is_numeric($starttime) ? date('Ymd',$starttime) : date('Ymd',strtotime($starttime));
}
if(!empty($endtime)){
$end = is_numeric($endtime) ? date('Ymd',$endtime) : date('Ymd',strtotime($endtime));
}
if(!empty($start) && !empty($end)){
$prev = floor($start / 100);
$next = floor($end / 100);
//开始时间小于等于结束时间范围内的表都房间$tables
while ($prev <= $next){
$tables[] = self::PREFIX . $prev. '_1';
$tables[] = self::PREFIX . $prev. '_2';
$prev = ($prev % 100 === 12) ? ((floor($prev/100) + 1) * 100 +1) : $prev + 1; //对夸年的月份做特殊处理
} //以15天为分界线,分上下月,去除重复的表
if($start % 100 > 15){
array_shift($tables);
}
if($end % 100 <= 15){
array_pop($tables);
}
}
return $tables;
}
}
//获取表名
$tables = TablePrefix::getTableByDateRange('2019-03-05 12:00:00','2019-03-05 14:00:00');
//循环处理各个表中的数据
$table = array_shift($tables); // 首先拿出第一张表中的数据
while(true){
__loop: //...... (每张表的业务逻辑) // 如果$tables中没有表了,则跳出循环,否则循环处理
if(empty($tables)){
break;
}else{
$table = array_shift($tables);
goto __loop;
}
}
此文为袋鼠(Chrdai)工作中所几记,如有转载请注明出处:https://www.cnblogs.com/chrdai/p/10551175.html
按月分表(create table)的更多相关文章
- Mycat(5):聊天消息表数据库按月分表实践,平滑扩展
本文的原文连接是: http://blog.csdn.net/freewebsys/article/details/47003577 未经博主同意不得转载. 1,业务需求 比方一个社交软件,比方像腾讯 ...
- 用复制方式创建表 Create Table tbname as select * from user.tab where ...
用复制方式创建表 Create Table tbname as select * from user.tab where ...
- mysql如何查询多样同样的表/sql分表查询、java项目日志表分表的开发思路/按月分表
之前开发的一个监控系统,数据库的日志表是单表,虽然现在数据还不大并且做了查询sql优化,不过以后数据库的日志表数据肯定会越来越庞大,将会导致查询缓慢,所以把日志表改成分表,日志表可以按时间做水平分表, ...
- mysql 创建表 create table详解
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 ...
- Oracle 创建表 Create Table...
一.创建表 主键约束primary key 约束条件,唯一且非空,一个表中只能有一个主键:有多个字段联合作为主键时,合在一起唯一标识记录,叫做联合主键. 外键约束 foreign key 受另外一张表 ...
- mysql 事件 按月分表
/****** 对象: Table Order_201512 脚本日期: 2015/12/18 11:44:23 ******/ /****** 字段数据长度 = 2599 字节 ******/ CR ...
- 根据查询结果创建新表create table .. as (select....)
一张表 student 查询数学和英语都是90分以上的同学,并创建一张新表 test1
- mysql按月分表, 组合查询
每个月月底最后一天建好下个月的空表 或每年底建1到12月的空表 , table_201901,table_201902,table_201903 增加记录不需要修改,insert到当月对应表就好了. ...
- Mysql数据库进阶之(分表分库,主从分离)
前言:数据库的优化是一个程序员的分水岭,作为小白我也得去提前学习这方面的数据的 (一) 三范式和逆范式 听起范式这个迟非常专业我来举个简单的栗子: 第一范式就是: 把能够关联的每条数据都拆分成一个 ...
随机推荐
- ubuntu 下开机启动项修复(进不去windows系统)
1.终端输入: sudo gedit /etc/default/grub 2.更改: GRUB_DEFAULT=0 改为 GRUB_DEFAULT=4 GRUB_TIMEOUT=10 改为 ...
- Mac环境下Vagrant的安装
1.安装Vagrant 下载地址:https://www.vagrantup.com/downloads.html 下载好pkg包后,点击安装即可. 2.安装 VirtualBox 下载地址:http ...
- 机器学习基石8-Noise and Error
注: 文章中所有的图片均来自台湾大学林轩田<机器学习基石>课程. 笔记原作者:红色石头 微信公众号:AI有道 上一节课,我们主要介绍了VC Dimension的概念.如果Hypothese ...
- C++关于string的一些用法
#include <iostream> #include <algorithm> #include <functional> using namespace std ...
- springboot动态多数据源
参考文章:https://www.cnblogs.com/hehehaha/p/6147096.html 前言 目标是springboot工程支持多个MySQL数据源,在代码层面上,同一个SQL(Ma ...
- C# 解压缩工具类GZip
using System; using System.Collections.Generic; using System.IO; using System.IO.Compression; using ...
- 初学python之路-day07-字符编码
今天的博客主要关于字符编码,并对前几天学习的数据类型做些总结. 学习字符编码的目的:解决乱码问题. 应用程序打开文本文件的三步骤 1.打开应用程序 2.将数据加载到内存中 3.cpu将内存中的数 ...
- MQTT控制---connect
连接服务端 客户端到服务端的第一个报文必须是CONNECT,且只能发送一次,发送的第二个connect报文当作违规处理并断开连接. 有效载荷包含一个或者多个编码的字段.包括客户端的唯一标识符,Will ...
- pycharm远程调试服务器
1.下载专业版pycharm并激活 https://blog.csdn.net/weixin_39332299/article/details/79692283 2.创建项目,设置解释器时,选择SSH ...
- vertx.FileResolver文件解析
FileResolver Class //文件复制解析,复制文件到cache directory 中 ,VM options : -Dvertx.disableFileCPResolving publ ...