Python进阶----pymysql的安装与使用,mysql数据库的备份和恢复,mysql的事务和锁

Python进阶----pymysql的安装与使用,mysql数据库的备份和恢复,mysql的事务和锁

一丶安装

pip install PyMySQL

二丶pymysql连接数据库

### 语法:
    import pymysql							# 导入py模块

    conn= pymysql.connect("数据库ip","用户","密码","数据库" ) # 打开数据库连接
    cursor.execute("SELECT VERSION()")                    # 使用 execute() 方法执行 SQL 查询
    data = cursor.fetchone()                              # 使用 fetchone() 方法获取单条数据
    print ("Database version : %s " % data)
    conn.close()                                            # 关闭数据库连接

### 返回列表包着字典形式数据
cur = conn.cursor(cursor=pymysql.cursors.DictCursor)

### 返回列表包着元组形式数据
cur = conn.cursor()

三丶pymysql创建表操作

import pymysql

# 打开数据库连接
db = pymysql.connect("localhost","testuser","test123","TESTDB" )

# 使用 cursor() 方法创建一个游标对象 cursor
cursor = db.cursor()

# 使用 execute() 方法执行 SQL，如果表存在则删除
cursor.execute("DROP TABLE IF EXISTS EMPLOYEE")

# 使用预处理语句创建表
sql = """CREATE TABLE EMPLOYEE (
         FIRST_NAME  CHAR(20) NOT NULL,
         LAST_NAME  CHAR(20),
         AGE INT,
         SEX CHAR(1),
         INCOME FLOAT )"""

cursor.execute(sql)

# 关闭数据库连接
db.close()

四丶数据操作

增: 推荐使用execute拼接sql

### 方式一:
    import pymysql

    # 打开数据库连接
    db = pymysql.connect("localhost","testuser","test123","TESTDB" )

    # 使用cursor()方法获取操作游标
    cursor = db.cursor()

    # SQL 插入语句
    sql = """INSERT INTO EMPLOYEE(FIRST_NAME,
             LAST_NAME, AGE, SEX, INCOME)
             VALUES ('Mac', 'Mohan', 20, 'M', 2000)"""
    try:
       cursor.execute(sql) # 执行sql语句
       db.commit()         # 提交到数据库执行
    except:
       db.rollback()       # 如果发生错误则回滚

    # 关闭数据库连接
    db.close()

### 方式二  : %s 代替字段,使用execute拼接sql语句

    import pymysql

    # 打开数据库连接
    db = pymysql.connect("localhost","testuser","test123","TESTDB" )

    # 使用cursor()方法获取操作游标
    cursor = db.cursor()

    # SQL 插入语句
    sql = "INSERT INTO EMPLOYEE(FIRST_NAME, LAST_NAME, AGE, SEX, INCOME) VALUES (%s, %s,  %s,  %s,  %s )" %

    try:

       cursor.execute(sql,(*('Mac', 'Mohan', 20, 'M', 2000),))  # 执行sql语句
       db.commit()          # 执行sql语句
    except:
       db.rollback()        # 发生错误时回滚

    # 关闭数据库连接
    db.close()

删

import pymysql

# 打开数据库连接
db = pymysql.connect("localhost","testuser","test123","TESTDB" )

# 使用cursor()方法获取操作游标
cursor = db.cursor()

# SQL 删除语句
sql = "DELETE FROM EMPLOYEE WHERE AGE > %s" % (20)
try
   cursor.execute(sql)  # 执行SQL语句
   db.commit()          # 提交修改
except
   db.rollback()        # 发生错误时回滚# 关闭连接
db.close()

改

import pymysql

# 打开数据库连接
db = pymysql.connect("localhost","testuser","test123","TESTDB" )

# 使用cursor()方法获取操作游标
cursor = db.cursor()

# SQL 更新语句
sql = "UPDATE EMPLOYEE SET AGE = AGE + 1 WHERE SEX = '%c'" % ('M')
try:
   cursor.execute(sql)  # 执行SQL语句
   db.commit()          # 提交到数据库执行
except
   db.rollback()        # 发生错误时回滚

# 关闭数据库连接
db.close()

查询

​   ​   fetchone(): 获取一条记录

​   ​   fetchmany(): 获取多条记录

​​   ​   fetchall(): 接收全部返回的结果行

​   ​   rowcount: 并返回执行execute()方法后影响的行数

import pymysql

# 创建连接对象
conn = pymysql.Connect('127.0.0.1', 'root', '123', 'day40', 3306)

## 创建  数据库游标对象
cur = conn.cursor()

sql = 'select * from book'

# 执行sql
cur.execute(sql)

# 查询结果
res1 = cur.fetchone()  # 查询一条  以元组的形式返回数据
res2 = cur.fetchmany(2)  # 查询多条
res3 = cur.fetchall()  # 查询全部

print(res1)     # 控制台打印结果
print(res2)
print(res3)

# 关闭连接
cur.close()
conn.close()

五丶数据库的数据备份

语法:

​​   ​   mysqldump -h 服务器 -u用户名 -p密码 数据库名 >备份文件名.sql

# 数据库表备份
	# 单库备份
	mysqldump -uroot -p123 --databases db1 > db1.sql #(路径+文件名)
	# 单表备份
	mysqldump -uroot -p123 db1 table1 > 数据库-表.sql #(路径+表文件名) 

	# 多库备份
	mysqldump -uroot -p123 --databases db1 db2 mysql db3 > db1_db2_mysql_db3.sql
	# 多表备份
	mysqldump -uroot -p123 db1 table1 table2 > db1-table1-table2.sql

# 备份所有库
mysqldump -uroot -p123 --all-databases > all.sql

### 数据恢复
	#方法一：
    [root@egon backup]# mysql -uroot -p123 < /backup/all.sql

    #方法二： 先创建一个名字一样的库, source导入sql语句
    mysql> use db1;
    mysql> SET SQL_LOG_BIN=0;   #关闭二进制日志，只对当前session生效
    mysql> source /root/db1.sq

六丶开启事务和锁

begin;		#开启事务
select * from 表 where id=1 for update ; # 查询id为1的值,  for update表示添加行级别锁
update 表 set name='abc' where id=1;	    # 完成更新
commit; 	#提交事务

七丶事务

什么是事务?

# 事务是指包含多个微小逻辑单元的一组操作,只要其中的一个逻辑失败了,那么一组操作就全部失败. 不存在一半成功,一半不成功的状况.

事务有什么用?

# 事务在平常的CRUD中或许不太常用, 但当我们有一种需求,要求,一组操作中.必须全部成功才执行,才算完成任务. 只要有一个出了错,那么所有的任务都将回到最初的状况,恢复原样.如:银行的转账

事务怎么用?

1. 新建一个数据库 bank , 并且创建一张表 account , 用于存储用户的姓名 和 存款。

2. 打开命令行，进入 mysql 终端

3. 先使用 show variables  like '%commit%'; 来查看当前数据库的事务自动提交设置。

4. 修改事务的自动提交 为 OFF ， 也就是关闭自动提交，我们想手动提交，看看数据的变化。

		set autocommit = OFF ;   此处 off 小写也OK ，不区分大小写， 当然也可以写 0  ， OFF 对应的是 0 ， ON 对应的是 1；

5. 对某个用户的存款进行修改。 接着在 命令行下查看数据，发现数据已经变化， 但是转到 GUI 下看，并没有任何变化。 这是因为我们没有提交数据。
	在命令行看到的都是假象而已。 

6. 在命令行下 输入 commit ;   来提交事务。 这时候，GUI 上面就显示出来最终的结果了。

事务的ACID

# 原子性Atomicity
	事务中的逻辑d要全部执行 , 不可分割.
# 一致性Consistency
	指事务执行前和执行后,数据的完整性保持一致
# 隔离性Isolation
	指一个事物在执行的过程中不应该受其他事务的影响
# 持久性Durability
	事务执行结束(提交或回滚),数据都应持久化到数据中

事务的安全问题

### 安全问题
	### 读问题
		# 脏读 : 一个事务,读到了另一个事务的还未提交的数据
		# 不可重复读 : 一个事物 读到了另一个事物提交的数据,导致多次查询结果不一致
		# 幻读 : 一个事物读到了另一个事物已提交的且插入的数据,导致多次查询结果不一致

    ### 写问题
    	# 丢失更新
    		''
    			丢失更新: 指一个事物去修改数据库, 另一个事务也修改数据库,最后的那个事务.不管是提交还是回滚,都会造成前面一个事物的数据更新丢失
    		''
    	# 解决 丢失更新的方法:(悲观锁 和 乐观锁)
    		# 悲观锁
	指事务在一开始就认为丢失更新一定会发生， 这是一件很悲观的事情。 具体操作步骤如下：

	# 1. 所有事务在执行操作前，先查询一次数据， 查询语句如下：

		select * from student  for update  ;           后面的for update 其实是数据库锁机制 、 一种排他锁。

	# 2. 哪个事务先执行这个语句， 哪个事务就持有了这把锁， 可以查询出来数据， 后面的事务再执行这条语句，不会有任何数据显示，就只能等着。 

	# 3. 一直等到前面的那个事务提交数据后， 后面的事务数据才会出来，那么才可以往下接着操作。 

### 总结: 这有点像男生去上卫生间似的， 如果谁先来，谁就可以进去蹲着， 后面来的人，得等着。 只有里面的人出来了，才能进去。 这其实就是 java 中的同步的概念            

    		# 乐观锁
	# 乐观锁是指，从来不会觉得丢失更新会发生。那么它的具体做法是什么呢? 

	# 要求程序员在数据库中添加字段，然后在后续更新的时候，对该字段进行判定比对， 如果一致才允许更新。例子如下：

	# 1. 数据库表中，额外添加了一个version字段， 用于记录版本， 默认从0 开始， 只要有针对表中数据进行修改的，那么version就+1.

	# 2. 开启A事务， 然后开启B事务 。 

	# 3. A 先执行数据库表操作。 因为以前都没有人修改过。 所以是允许A事务修改数据库的，但是修改完毕，就把version的值变成  1 了 。

	# 4. B事务， 这时候如果想执行修改，那么是不允许修改的。 因为B事务以前是没有查询过数据库内容的，所以它认为数据库版本还是0 。 但是数据库的版本经过A修改，已经是1了。
		所以这时候不允许修改， 要求其重新查询 。

	# 5. B重新查询后， 将会得到version 为 1的数据，这份数据就是之前A 事务修改的数据了， B 在进行修改，也是在A的基础上修改的。 所以就不会有丢失更新的情况出现了。

### 总结: 乐观锁的机制 ，其实是通过比对版本或者比对字段的方式来实现的， 这与大家在未来的学习中，或者在工作中，使用到的版本控制软件【SVN , GIT】机制是一样的。

事务的隔离级别

# 读未提交
Read Uncommited【读未提交】

指的是 ： 一个事务可以读取到另一个事务还未提交的数据。 这就会引发 “脏读” 读取到的是数据库内存中的数据，而并非真正磁盘上的数据。

例子： 

	1. 开启一个命令行窗口A， 开始事务，然后查询表中记录。  设置当前窗口的事务隔离级别为 读未提交  命令如下：

			set session transaction isolation level read uncommitted;

	2. 另外在打开一个窗口B， 也开启事务， 然后执行 sql 语句， 但是不提交

	3. 在A窗口重新执行查询， 会看到B窗口没有提交的数据。

# 读已提交
Read Commited 【读已提交】

与前面的读未提交刚好相反，这个隔离级别是 ，只能读取到其他事务已经提交的数据，那些没有提交的数据是读不出来的。但是这会造成一个问题是： 前后读取到的结果不一样。 发生了不可重复!!!, 所谓的不可重复读，就是不能执行多次读取，否则出现结果不一 。 例子如下：

	1. 开启一个命令行窗口A， 开始事务，然后查询表中记录。  设置当前窗口的事务隔离级别为 读未提交  命令如下：

			set session transaction isolation level read committed;

	2. 另外在打开一个窗口B， 也开启事务， 然后执行 sql 语句， 但是不提交 

	3. 在A窗口重新执行查询， 是不会看到B窗口刚才执行sql 语句的结果，因为它还没有提交。

	4. 在B窗口执行提交。

	5. 在A窗口中执行查看， 这时候才会看到B窗口已经修改的结果。

	6. 但是这会造成一个问题是： 在A窗口中， 第一次查看数据和第二次查看数据，结果不一样。

# 重复度
Repeatable Read 【重复读】 -  MySql 默认的隔离级别就是这个。

该隔离级别， 可以让事务在自己的会话中重复读取数据，并且不会出现结果不一样的状况，即使其他事务已经提交了，也依然还是显示以前的数据。

	1. 开启一个命令行窗口A， 开始事务，然后查询表中记录。  设置当前窗口的事务隔离级别为 读未提交  命令如下：

			set session transaction isolation level read committed;

	2. 另外在打开一个窗口B， 也开启事务， 然后执行 sql 语句， 但是不提交 

	3. 在A窗口重新执行查询， 是不会看到B窗口刚才执行sql 语句的结果，因为它还没有提交。

	4. 在B窗口执行提交。

	5. 在A窗口中执行查看， 这时候查询结果，和以前的查询结果一致。不会发生改变。

# 可串行化
Serializable 【可串行化】 

该事务级别是最高级的事务级别了。比前面几种都要强大一点，也就是前面几种的问题【脏读、不可重复读、幻读】都能够解决。但是有一些缺点。

	1. 开启一个命令行窗口A， 开始事务，然后查询表中记录。  设置当前窗口的事务隔离级别为 读未提交  命令如下：

			set session transaction isolation level read serializable;

	2. 另外在打开一个窗口B， 也开启事务， 然后执行 sql 语句， 但是不提交 

	3. 在A窗口重新执行查询， 会卡主，没有任何信息显示。 

	4. 在B窗口执行提交。

	5. 在A窗口中执行查看， 这时候才会显示结果。

Serializable  可以防止上面的所有问题，但是都使用该隔离级别也会有些问题。 比如造成并发的性能问题。 其他的事务必须得等当前正在操作表的事务先提交，才能接着往下，否则只能一直在等着。

八丶SQL注入

# 只存在于原生SQL语句中的问题

import pymysql

conn=pymysql.Connect('127.0.0.1','root','123','day43',3306)
cur=conn.cursor(cursor=pymysql.cursors.DictCursor) # 返回字典
# cur=conn.cursor() # 返回元组
# sql 注入~~
user="al大撒旦ex' or 1=1 ;-- " # 方式一   sql注入 永真语法 恒1
user="alex'  ;-- "          # 方式二   sql注入
pwd='32131'
# sql="select * from userinfo where name='alex' ; --and pwd='%s';"
# sql="select * from userinfo where name='alexdsada' or 1=1 ; --and pwd='%s';"
sql="select * from userinfo where name='%s' and pwd='%s';"%(user,pwd)
cur.execute(sql)
ret=cur.fetchall()
print(ret)
cur.close()
conn.close()