工作中 sql 整理(一)
这篇文章记录关于SQL的内容,有些凌乱,是工作中点滴的积累,只能按照时间顺序,逐次记录。
一、update 关联更新
1.需求
Table A TableB
A表中的主键和B表中的主键相关联,关联(inner join)上之后,用A表中的某字段值,去更新B表中的某个字段值。
2.环境
old_table数据:
"1","1001","lee","20181001"
"2","1002","wang","20181002"
"3","1003","song","20181003"
new_table数据:
"1","1001","lee","5"
"2","1002","lee","5"
3.sql文如下:
update new_table AS new
set new.time =
(
select old.time from old_table AS old
where new.id_1 = old.id_1
and
new.id_2 = old.id_2
and
new.time<>old.time
)
where
exists (
select 1 from old_table AS old
where new.id_1 = old.id_1
and
new.id_2 = old.id_2
and
new.time<>old.time
)
执行之后可以成功更新。
但是有一个性能问题:
里面用了exists,当new_table里的数据量很大时,性能不是很好。我用oracle测试时,new_table放了100w数据,更新成功,费时27s。
如何提升性能,暂时没想到好的方法。
二、mysql流式查询(Streaming resultSet)
当确定检索条件后,进行查询,一次查询出很多数据时,我们一般可以采用数据分页的方法,分别显示。还有一种实现方式,就是流式查询,一点点将数据放入内存中,读取,使用。具体的使用方式如下面所示(今天流式查询是一个新的思路,但是使用流式查询的场景,没有实际用过,有用过的,望赐教)。
实现方式有两种:
stmt = conn.createStatement(java.sql.ResultSet.TYPE_FORWARD_ONLY,
java.sql.ResultSet.CONCUR_READ_ONLY);
stmt.setFetchSize(Integer.MIN_VALUE);
conn = DriverManager.getConnection("jdbc:mysql://localhost/?useCursorFetch=true", "user", "s3cr3t");
stmt = conn.createStatement();
stmt.setFetchSize(100);
rs = stmt.executeQuery("SELECT * FROM your_table_here");
具体说明呢,我给出链接,官方文档说的非常详细了。
https://dev.mysql.com/doc/connector-j/5.1/en/connector-j-reference-implementation-notes.html
在ResultSet那部分。
三、pl/sql
1.最简单,最困难。
错误信息:PL/SQL: SQL Statement ignored
乍眼一看,肯定是变量未声明。但是,检查一圈,确实就在那里,已经声明了。弄了一下午,原来是,在数据库中,表没有被创建。。。
我的心啊!
2.dbms_output.put_line('22')
在控制台打不出信息,调查后,应该添加如下语句:SET SERVEROUTPUT ON SIZE 10000;
四、oracle 常用函数
NVL NVL2
RPAD LPAD
COALESC
五、char varchar varchar2 比较(Oracle)
给个原文出处,里面说的很详细:www.orafaq.com/faq/what_is_the_difference_between_varchar_varchar2_and_char_data_types
char :输入字符后,不满最大位数时,数据库中在后面自动补空格
varcahr、varchar2:输入字符后,不满最大位数时,数据库中在后面不会补空格。目前varchar和varchar2几乎一样,然而,varchar should not be used as it is reserved for future usage.(英文后半部分的意思没有搞明白。。。有知道的前辈,望赐教!)
六、表的复制(Oracle)
工作中测试的时候,有时是多人用一个数据库。测试时,会由于各种原因,有人将一张表进行备份,再建立一个一模一样结构的表。
原来的表 A
rename A to A_bk;
create table A as select * from A_bk where rownum<‘2’;
这样开发人员就可以快速的复制一样表结构的表。但是要注意的是,新创建的表,只是表最基本的表名、字段的属性等信息与原表一样,主键等信息没有被创建,就是由于主键的问题带来了很多的麻烦,这里要切记!
七、执行计划
在Oracle里,如何查看sql的执行计划:
① explain plan for 你要执行的sql ;
② select * from table(dbms_xplan.display)
八、常用sql
Oracle:
1.变更表名
rename A to B;
2. select itemA, count(itemA) from TableName
group by itemA
having itemA in
(select distinct(itemA) from TableName
3.建表
create table XXX as select * from tableName;
4.表解锁
SELECT
object_name,
oracle_username,
s.sid,
s.serial#,
s.logon_time,
sql_address
FROM v$locked_object l,
dba_objects o,
v$session s
WHERE l.object_id = o.object_id
and l.session_id = s.sid
and object_name = 'table_name';
ALTER SYSTEM KILL SESSION 'SID,SERIAL';
九·、ROW_NMBER() OVER (Oracle)
这个是今天干活时遇到的,第一次见。觉得挺有用,记录一下。
ROW_NMBER()是一个在group数据上,计算聚合值分析功能函数。它和别的聚合函数不同之处在于,它可以为每个group返回多条数据。这话说得有些抽象,下面看例子:
SELECT department_id, last_name, employee_id, ROW_NUMBER()
OVER (PARTITION BY department_id ORDER BY employee_id) AS emp_id --PARTITION 就是分组的意思
FROM employees;
执行结果:

我相信,看完例子之后,大家心里能了解它的作用了。
接下来,再小小修改一下:
SELECT department_id, last_name, employee_id, ROW_NUMBER()
TO_CHAR( OVER (PARTITION BY department_id ORDER BY employee_id), 'FM09' ) AS emp_id --加上红字后,自己再跑跑,看看结果的样式有什么变化
FROM employees;
参考文章:
https://docs.oracle.com/cd/E11882_01/server.112/e41084/functions004.htm#SQLRF06174
https://gerardnico.com/db/oracle/row_number
十、SQL执行顺序
了解它的执行顺序有什么用?可以在编写过程中,避免一些问题。比如下面sql:
select A.name AS stu_name
from table A
group by stu_name;
执行时会报错,group by 的stu_name,找不到。原因在于下面的sql执行顺序。

图片出处:https://www.periscopedata.com/blog/sql-query-order-of-operations
当group by 的时候,还未执行select操作,所以自然就不知道字段的别名了。
十一、sql行转列
表中的数据:

变化后的数据:

sql写法如下:
SELECT name,
SUM(CASE `Type` WHEN 'salary' THEN Amount ELSE 0 END) as 'salary',
SUM(CASE `Type` WHEN 'bonus' THEN Amount ELSE 0 END) as 'bonus'
FROM salary
GROUP BY name;
To be continued...
工作中 sql 整理(一)的更多相关文章
- 工作中SQL语句的优化
在我们的工作中,数据是很多的,这是我常见问题遇到的问题做了简短总结. 1.对查询进行优化,应尽量避免全表扫描,首先应考虑在 where 及 order by 涉及的列上建立索引. 2.应尽量避免在 w ...
- 工作中积累整理-CSS样式表(一)
[layout] clear:该属性的值指出了不允许有浮动对象的边. 默认值:none none: 允许两边都可以有浮动对象 both: 不允许有浮动对象 left: 不允许左边有浮动对象 right ...
- 整理:sql server 中sql语句执行顺序
SQL Server 查询处理中的各个阶段(SQL执行顺序) SQL 不同于与其他编程语言的最明显特征是处理代码的顺序.在大数编程语言中,代码按编码顺序被处理,但是在SQL语言中,第一个被处理的子句是 ...
- 工作经常使用的SQL整理,实战篇(二)
原文:工作经常使用的SQL整理,实战篇(二) 工作经常使用的SQL整理,实战篇,地址一览: 工作经常使用的SQL整理,实战篇(一) 工作经常使用的SQL整理,实战篇(二) 工作经常使用的SQL整理,实 ...
- 工作经常使用的SQL整理,实战篇(三)
原文:工作经常使用的SQL整理,实战篇(三) 工作经常使用的SQL整理,实战篇,地址一览: 工作经常使用的SQL整理,实战篇(一) 工作经常使用的SQL整理,实战篇(二) 工作经常使用的SQL整理,实 ...
- 工作经常使用的SQL整理,实战篇(一)
原文:工作经常使用的SQL整理,实战篇(一) 工作经常使用的SQL整理,实战篇,地址一览: 工作经常使用的SQL整理,实战篇(一) 工作经常使用的SQL整理,实战篇(二) 工作经常使用的SQL整理,实 ...
- 工作经常使用的SQL整理
工作经常使用的SQL整理,实战篇(二) 工作经常使用的SQL整理,实战篇,地址一览: 工作经常使用的SQL整理,实战篇(一) 工作经常使用的SQL整理,实战篇(二) 工作经常使用的SQL整理,实战 ...
- [SQL SERVER系列]工作经常使用的SQL整理,实战篇(一)[原创]
工作经常使用的SQL整理,实战篇,地址一览: 工作经常使用的SQL整理,实战篇(一) 工作经常使用的SQL整理,实战篇(二) 工作经常使用的SQL整理,实战篇(三) 目录概览: 1.数据库 2.表 3 ...
- [SQL SERVER系列]工作经常使用的SQL整理,实战篇(三)[原创]
工作经常使用的SQL整理,实战篇,地址一览: 工作经常使用的SQL整理,实战篇(一) 工作经常使用的SQL整理,实战篇(二) 工作经常使用的SQL整理,实战篇(三) 接着本系列前面两篇继续讨论. 有时 ...
随机推荐
- (转)GANs and Divergence Minimization
GANs and Divergence Minimization 2018-12-22 09:38:27 This blog is copied from: https://colinraff ...
- 【团队】EasyKing的实现_2
下载开发版 完成情况 完成了碰撞箱的制作 TODO 子弹攻击范围 音效 英雄技能 建筑 双人联机 物品 小兵 地图移动
- Apache web服务器(LAMP架构)
Apache web服务器(LAMP架构) apache介绍 1).世界上使用率最高的网站服务器,最高时可达70%:官方网站:apache.org 2).http 超文本协议 HTML 超文本标记语言 ...
- 聊聊Flume和Logstash的那些事儿
在某个Logstash的场景下,我产生了为什么不能用Flume代替Logstash的疑问,因此查阅了不少材料在这里总结,大部分都是前人的工作经验下,加了一些我自己的思考在里面,希望对大家有帮助. 本文 ...
- dedecmsv5.7 ueditor编辑器上传视频/修改,视频显示空白,解决方案
dedecmsv5.7 ueditor 在上传视频之后,显示空白.其实是有视频的,就是显示空白.找了资料,记录一下. 解决方案: 找到include下面的ueditor下面的ueditor.all.j ...
- mapping values are not allowed in this context at line 115 column 10
/opt/vagrant/embedded/lib/ruby//psych.rb::in `parse': (<unknown>): mapping values are not allo ...
- Matlab:高阶常微分三种边界条件的特殊解法(中心差分法,高精度导数边界处理)
函数文件1: function b=F(f,x0,h,N) % b(1,1)=x0(1)-h*x0(2)-u(1); % b(2,1)=x0(2)+h*x0(1)^2-u(2)-h*f; b=zero ...
- 从Excel、CSV文件获取数据
#region 从Excel获取数据 /// <summary> /// 从Excel获取数据 /// </summary> /// <param name=" ...
- ThinkPHP5.0源码学习之执行应用
一.应用启动 在/thinkphp/start.php文件中,用一句代码App::run()->send();实现应用的启动. // 执行应用 App::run()->send(); ...
- zzw_rsync命令中的/的作用
[root@sv0379 rsync]# rsync -vzrtopg --password-file=/usr/local/rsync/rsync.passwd /opt/aspire/prod ...