将具有多表关联的Excel数据,通过sql语句脚本的形式,导入到数据库 写在前面:本文用的语言是java:数据库是MySql: 需求:在实际项目中,经常会被客户要求,做批量导入数据:一般的简单的单表数据,可以直接通过Navicat的导入功能,将Excel表格信息直接导入:单实际情况是——需要导入的数据要分别保存在对应的多张表中,其中一张主表,多张关联副表,这个时候再用Navicat的导入功能,无法满足需求! 本文总结一种方法处理这种批量录入多表数据:如下. 核心思路:将Excel数据表中的数据,…
前面我们介绍了单张表的查询,包括模糊查询.分组.排序.各种筛选条件等等操作,在实际应用中,查询的数据往往不止局限在一张表里,通常需要多张表在一起进行组合查询,今天我们将会对Mysql当中的多张有关联的表进行组合查询,本节内容涉及到的几个关键点有: 等值和非等值连接查询:自然连接查询:嵌套查询:自身连接查询: 我们还是通过Python中的“pymysql”模块来连接Mysql数据库,进行今天的学习. 准备工作 和上次一样,我们还是建立了三张表,它们分别是:学生表.学科表.成绩表.每张表都有一个自增…
最近在做项目中遇到多表关联查询排序的效率问题(5张以上40W+数据的表),查询一次大概要20多秒,经过一番苦思冥想,处理方案如下: 1.软件设计初期,需要一对一关联的表应该设计在一张大表里,这样虽然字段多些,但是对于查询的速度提升是非常明显的,特别是在排序的情况下. 2.我们在关联的时候可能需要排序的表只是其中的一张或者两张,我们可以先针对这两张需要排序的表先查询排序,然后再用这两个表查询的结果关联其他表.代码如下: SELECT * FROM ( SELECT * FROM M_RK_JBXX…
三张表,需要得到的数据是标红色部分的.sql如下: select a.uid,a.uname,a.upsw,a.urealname,a.utel,a.uremark, b.rid,b.rname,b.rremark,c.deptid,c.deptname,c.deptremark from table1 a,table2 b,table3 c where a.sems_role_rid=b.rid and a.udeptid=c.deptid 或者: select a.uid,a.uname,a…
工作中我们经常用到多个left join去关联其他表查询结果,但是随着数据量的增加,一个表的数据达到百万级别后,这种普通的left join查询将非常的耗时. 举个例子:  现在porder表有 1000W数据,其他关联的表数据都很少,因为条件的限制必须要关联3个表,正常的逻辑就是这样写,但是我们在数据库执行的时候会发现这样的SQL非常耗时,而且此时才 limit 800  这样的SQL怎么能让用户受得了呢? select p.*,b.supplier,t.type,c.org   from p…
一.工具导出 1.使用的是MySQL-Front工具,这个工具使用非常方便,尤其是导出数据的时候,几百万的数据一两分钟就导完了,推荐使用. MySQL-Front下载(只有3.93M):http://www.mysqlfront.de/ 2.打开工具连接mysql: 3.选择数据库,一mysql自带数据库为例: 3.以HTML的格式导出,选择数据库名右击选择导出->HTML文件,选择导出的路径,点击运行: 4.导出的文件在谷歌浏览器打开: 5.新建word文档,复制浏览器的内容粘贴到word中:…
1.数据库语言的分类 DDL:数据库定义语言 data Definition language 用于创建.修改.和删除数据库内的数据结构,如: 1:创建和删除数据库(CREATE DATABASE || DROP DATABASE): 2:创建.修改.重命名.删除表(CREATE TABLE || ALTER TABLE|| RENAME TABLE||DROP TABLE,TRUNCATE TABLE): 3:创建和删除索引(CREATEINDEX || DROP INDEX) DML:数据操…
本文主要针对中小型应用或网站,重点探讨日常程序开发中SQL语句的优化问题,所谓“大数据”.“高并发”仅针对中小型应用而言,专业的数据库运维大神请无视.以下实践为个人在实际开发工作中,针对相对“大数据”和相对“高并发”场景的一些应对策略,部分措施并没有经过严格的对比测试和原理分析,如有错漏欢迎各种批评指教.减少查询的影响结果集,避免出现全表扫描.影响结果集是SQL优化的核心.影响结果集不是查询返回的 本文主要针对中小型应用或网站,重点探讨日常程序开发中SQL语句的优化问题,所谓“大数据”.“高并发…
MySQL创建表: 表(一)Student (学生表): CREATE TABLE `Student` ( `sno` ) DEFAULT NULL, `sname` ) DEFAULT NULL, `sbrithday` DATETIME DEFAULT NULL, `ssex` ) DEFAULT NULL, `class` ) DEFAULT NULL ) ENGINE=INNODB DEFAULT CHARSET=utf8 执行以下代码,插入数据: INSERT INTO Student…
本地建一张表persons,使用脚本插入了1000万条数据 下面比较几种查询方法的耗时(查询9000000到9000005这中间5条数据) 查询结果: 1: SELECT * FROM test.persons limit 9000000,5; 2: SELECT * FROM test.persons where Id_P between 9000000 and 9000005; 可见几乎不消耗时间 3: SELECT * FROM test.persons where Id_P in(900…