按月分表(create table)
PHP 按月分表控制台命令(yii2版)
<?php
/**
* @Purpose: 按月分表脚本
* @User: Chrdai
* @Date: 2019/3/19
* @Time: 15:23
*/
namespace app\commands; use yii\console\Controller; class CreateTableController extends Controller
{
/**
* @var string 数据库服务器
*/
const HOST = '127.0.0.1'; /**
* @var string 用户名
*/
const USERNAME = 'root'; /**
* @var string 密码
*/
const PASSWORD = 'testpasswd'; /**
* @var string 数据库
*/
const DBNAME = 'test'; /**
* @var string 默认方法
*/
public $defaultAction = 'create-table-by-month'; public function options($actionID)
{
return parent::options($actionID);
} /**
* @purpose: 准备表前缀和表结构
* @author: Chrdai
* @time: 2019-03-19
* @return array
*/
public function prepare()
{
$userPrefix = 'user_';
$userSql = <<<EOF
(
id int(11) NOT NULL AUTO_INCREMENT,
name varchar(32) NOT NULL DEFAULT '' COMMENT '姓名',
created_at datetime DEFAULT CURRENT_TIMESTAMP COMMENT '创建时间',
updated_at datetime DEFAULT null COMMENT '更新时间',
PRIMARY KEY (id)
) CHARACTER SET utf8 COLLATE utf8_general_ci ENGINE=InnoDB AUTO_INCREMENT=1 DEFAULT CHARSET=utf8 COMMENT '用户表';
EOF; return [
[
'table_prefix' => $userPrefix,
'sql' => $userSql,
],
];
} /**
* @purpose: 如果网络可用,则进行一次时间同步
* @author: Chrdai
* @time: 2019-03-19
*/
public function updateToCurrentTime()
{
//ping 3 次
passthru('ping baidu.com -c 3 >/dev/null 2>&1',$res);
if($res === 0){
system('ntpdate asia.pool.ntp.org && hwclock --systohc');
}
} /**
* @purpose: 按月分表
* #表命名方案:table_prefix_年月_序号
* #每月的表1是保存1---15日的数据,表2是保存16--31日的数据
* @author: Chrdai
* @time: 2019-03-19
*/
public function actionCreateTableByMonth()
{
//登录mysql
$mysqlLoginInfo = '-h'.self::HOST.' -u'.self::USERNAME.' -p'.self::PASSWORD . ' -D'.self::DBNAME;
$createHead = "CREATE TABLE IF NOT EXISTS ";
$this->updateToCurrentTime();
$arrTable = $this->prepare();
$year = date('Y',time());
$month = date('m',time());
// 创建本月的表
foreach($arrTable as $val){
//每月2张表
for($i = 1; $i <=2 ; $i ++){
$tableName = $val['table_prefix'] . $year . $month . '_' . $i;
$sql = end($val);
system("/usr/bin/mysql {$mysqlLoginInfo} -e \"{$createHead} {$tableName} {$sql}\"");
}
} //创建下个月的表,如果跨年需要单独处理
if(intval($month) == 12){
$nextYear = $year + 1;
foreach($arrTable as $val){
for($i = 1; $i <=2 ; $i ++){
//下一年1月份的表名
$tableName = $val['table_prefix'] . $nextYear . '01_' . $i;
$sql = end($val);
system("/usr/bin/mysql {$mysqlLoginInfo} -e \"{$createHead} {$tableName} {$sql}\"");
}
}
}else{
$nextMonth = intval($month) + 1;
//下个月的表名
$fullMonth = $nextMonth < 10 ? '0' . $nextMonth : $nextMonth;
foreach($arrTable as $val){
for($i = 1; $i <=2 ; $i ++){
$tableName = $val['table_prefix'] . $year . $fullMonth . '_' . $i;
$sql = end($val);
system("/usr/bin/mysql {$mysqlLoginInfo} -e \"{$createHead} {$tableName} {$sql}\"");
}
}
}
}
}
分表规则为:
每月分两张表.
1-15号为 table_prefix_Ym_1 ,
16-31号为table_prefix_Ym_2 ,
如:table_prefix_201903_1
<?php
/**
* @purpose: 根据时间范围获取表名
* @explain: 表名的分表规则是,每月分两张表,1-15号为 table_prefix_Ym_1 ,16-31号为table_prefix_2 , 如:table_prefix_201903_1
* User: Chrdai
* Date: 2019/3/5
* Time: 18:08
*/ class TablePrefix
{
/**
* @const app调用记录表前缀
*/
const PREFIX= 'table_prefix_'; /**
* @purpose:获取指定时间范围内的app调用记录表
* @param int|string $starttime 开始时间
* @param int|string $endtime 结束时间
* @return array $tables 指定时间范围内的应用程序记录表
*/
public static function getTableByDateRange($starttime,$endtime)
{
$tables = [];
if(!empty($starttime)){
$start = is_numeric($starttime) ? date('Ymd',$starttime) : date('Ymd',strtotime($starttime));
}
if(!empty($endtime)){
$end = is_numeric($endtime) ? date('Ymd',$endtime) : date('Ymd',strtotime($endtime));
}
if(!empty($start) && !empty($end)){
$prev = floor($start / 100);
$next = floor($end / 100);
//开始时间小于等于结束时间范围内的表都房间$tables
while ($prev <= $next){
$tables[] = self::PREFIX . $prev. '_1';
$tables[] = self::PREFIX . $prev. '_2';
$prev = ($prev % 100 === 12) ? ((floor($prev/100) + 1) * 100 +1) : $prev + 1; //对夸年的月份做特殊处理
} //以15天为分界线,分上下月,去除重复的表
if($start % 100 > 15){
array_shift($tables);
}
if($end % 100 <= 15){
array_pop($tables);
}
}
return $tables;
}
}
//获取表名
$tables = TablePrefix::getTableByDateRange('2019-03-05 12:00:00','2019-03-05 14:00:00');
//循环处理各个表中的数据
$table = array_shift($tables); // 首先拿出第一张表中的数据
while(true){
__loop: //...... (每张表的业务逻辑) // 如果$tables中没有表了,则跳出循环,否则循环处理
if(empty($tables)){
break;
}else{
$table = array_shift($tables);
goto __loop;
}
}
此文为袋鼠(Chrdai)工作中所几记,如有转载请注明出处:https://www.cnblogs.com/chrdai/p/10551175.html
按月分表(create table)的更多相关文章
- Mycat(5):聊天消息表数据库按月分表实践,平滑扩展
本文的原文连接是: http://blog.csdn.net/freewebsys/article/details/47003577 未经博主同意不得转载. 1,业务需求 比方一个社交软件,比方像腾讯 ...
- 用复制方式创建表 Create Table tbname as select * from user.tab where ...
用复制方式创建表 Create Table tbname as select * from user.tab where ...
- mysql如何查询多样同样的表/sql分表查询、java项目日志表分表的开发思路/按月分表
之前开发的一个监控系统,数据库的日志表是单表,虽然现在数据还不大并且做了查询sql优化,不过以后数据库的日志表数据肯定会越来越庞大,将会导致查询缓慢,所以把日志表改成分表,日志表可以按时间做水平分表, ...
- mysql 创建表 create table详解
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 ...
- Oracle 创建表 Create Table...
一.创建表 主键约束primary key 约束条件,唯一且非空,一个表中只能有一个主键:有多个字段联合作为主键时,合在一起唯一标识记录,叫做联合主键. 外键约束 foreign key 受另外一张表 ...
- mysql 事件 按月分表
/****** 对象: Table Order_201512 脚本日期: 2015/12/18 11:44:23 ******/ /****** 字段数据长度 = 2599 字节 ******/ CR ...
- 根据查询结果创建新表create table .. as (select....)
一张表 student 查询数学和英语都是90分以上的同学,并创建一张新表 test1
- mysql按月分表, 组合查询
每个月月底最后一天建好下个月的空表 或每年底建1到12月的空表 , table_201901,table_201902,table_201903 增加记录不需要修改,insert到当月对应表就好了. ...
- Mysql数据库进阶之(分表分库,主从分离)
前言:数据库的优化是一个程序员的分水岭,作为小白我也得去提前学习这方面的数据的 (一) 三范式和逆范式 听起范式这个迟非常专业我来举个简单的栗子: 第一范式就是: 把能够关联的每条数据都拆分成一个 ...
随机推荐
- Python-Struct
从一个例子开始: >>> from struct import * >>> pack('hhl',1655, 255, 370) b'w\x06\xff\x00r\ ...
- 第三周四则运算辅助(CAI)结对项目需求文档
小学四则运算辅助(CAI) UI需求: 目的:让更对的小学生能学到更多的知识,提高做题的效率. 背景:该系统应用于小学生数学算术题的出题,判断对错以及错题本,该系统为解决家长每天为孩子出题的不便而解决 ...
- python selenium 模块
控制已打开的浏览器 https://www.cnblogs.com/lovealways/p/9813059.html selenium.自动填充文本框.自动点按钮 https://blog.csdn ...
- 软件测试-培训的套路-log3
最新的套路!我是没了解过--下图中描述-log3 Dotest-董浩 但是我知道不管什么没有白吃的午餐而且还会给钱…如果真的有,请醒醒! 当然话又回来,套路不套路,关键看你是否需要:你如果需要我觉得是 ...
- 2018-2019-20175315 实验一 《Java开发环境的熟悉》实验报告
2018-2019-20175315实验一 <Java开发环境的熟悉>实验报告 一.实验内容及步骤 实验1 1.用mkdir建立“20175303exp1”的目录 2.在“20175303 ...
- Centos7安装JDK+部署Tomcat8
Centos7下JDK+Tomcat的部署: 1.安装JDK 1.1 通过以下命令获得java JDK列表 yum -y list java* 1.2 通过yum安装JDK yum -y instal ...
- 多个 Github 网站账号 的配置
账号的基本配置可参考上篇 紧跟上篇已将config 文件配置好了,下面是多账号的配置 一, 多账号也是在config里面配置 1. 首先: 在git 里面输入命令: ll 可以看到 ...
- spring+myBatis 配置多数据源,切换数据源
注:本文来源于 tianzhiwuqis <spring+myBatis 配置多数据源,切换数据源> 一个项目里一般情况下只会使用到一个数据库,但有的需求是要显示其他数据库的内容,像这样 ...
- pycharm远程调试服务器
1.下载专业版pycharm并激活 https://blog.csdn.net/weixin_39332299/article/details/79692283 2.创建项目,设置解释器时,选择SSH ...
- 用 pdf.js兼容部分安卓显示PDF在线预览 时,a标签直接链接参数文件不能含中文的解决办法
例子: 项目部署在 Tomcat 上的: <a href="../generic/web/viewer.html?file=doc/register/要显示的文件.pdf" ...