…

目录 1. 数据文件 2. 读数据 3. 查找数据 4. 替换数据 4.1 一对一替换 4.2 多对一替换 4.3 多对多替换 5. 插入数据 6. 删除数据 6.1 删除列 6.2 删除行 7. 处理缺失值 7.1 数据准备 7.2 查看缺失值 7.3 删除缺失值 7.4 缺失值的填充 8. 处理重复值 8.1 删除重复行 8.2 删除某一列中的重复值 8.3 获取唯一值 9 排序数据 9.1 用sort_values()函数排序数据 9.2 用rank()函数获取数据的排名 10 rank(…

我们先在SQL Server数据库中,建立一张Students表: CREATE TABLE [dbo].[Students]( ,) NOT NULL, ) NULL, ) NULL, [Age] [int] NULL, ) NULL, CONSTRAINT [PK_Students] PRIMARY KEY CLUSTERED ( [ID] ASC )WITH (PAD_INDEX = OFF, STATISTICS_NORECOMPUTE = OFF, IGNORE_DUP_KEY = O…

说明:一般我们使用MYSQL插入记录时,类似于这样的语句: insert into table_name(email,phone,user_id) values(‘test9@163.com’,’99999′,’9999′) , 但是有时候我们可能还有这样的需求:判断数据是否存在, 如果不存在,则插入,.如果存在,则更新(或者不做任何操作). 方案一:REPLACE语法 replace的语法格式为: 1. replace into table_name(col_name, …) values(……

# 处理异常值缺失值重复值数据差分 import pandas as pd import numpy as np import copy # 设置列对齐 pd.set_option("display.unicode.ambiguous_as_wide",True) pd.set_option("display.unicode.east_asian_width",True) # 异常值 # 读取工号姓名时段交易额,使用默认索引 dataframe = pd.read_…

1 innodb 自增列出现重复值的问题 先从问题入手,重现下这个bug use test; drop table t1; create table t1(id int auto_increment, a int, primary key (id)) engine=innodb; ,);); ); select * from t1; +----+------+ | id | a | +----+------+ | | | +----+------+ ; ; select * from t1; +…

在生产环境中,我们有的列是不允许出现重复值的,亦或是某两列不允许同时重复,但由于前端未做限制,或者没限制住,出现了单列重复值,或者两列本应组成唯一组合却也出现重复,这两种情况都是不允许的.现在由于前端应用限制不住,要做删除操作后,添加唯一索引,从数据库层面进行限制,以下是处理过程: mysql> select * from aixuan1; +----+------+-------+ | id | text | text1 | +----+------+-------+ |  1 | aa  …

对重复值的处理 把数据结构中,行相同的数据只保留一行 函数语法: drop_duplicates() from pandas import read_csv df = read_csv(文件位置) newdf = df.drop_duplicates(); 对缺失值的处理 缺失值的产生 1.有些信息暂时无法获取 2.有些信息被遗漏或者错误处理了 缺失值的处理方式 1.数据补齐 2.删除对应缺失行 3.不处理 缺失值处理 dropna函数的作用:去除数据结构中值为空的数据 dropna函数语法:d…

重要: (1) SQL如果创建时候,不指定类型那么默认是非聚集索引 (2) 聚集索引和非聚集索引都可以有重复记录,唯一索引不能有重复记录. (3) 主键 默认是加了唯一约束的聚集索引,但是也可以在主键创建时,指定为唯一约束的非聚集索引,因此主键仅仅是默认加了唯一约束的聚集索引,不能说主键就是加了唯一约束的聚集索引 有点拗口,可以参考我的博客:主键就是聚集索引吗? 为列创建索引实际上就是为列进行排序,以方便查询.建立一个列的索引,就相当与建立一个列的排序. 主键是唯一的,所以创建了一个主键的同时,…

要插入的数据  与表中记录数据的 惟一索引或主键中产生重复值,那么就会发生旧行的更新 弊端:造成主键自增不连续.适合数据量不大的表. ON DUPLICATE KEY UPDATE后面的条件 eg有如下表,仅主键存在UK(唯一)属性: select * from Student id name age 1 jack 20 2 rose 21 insert into Student ( id,name) values (1,'jack') ON DUPLICATE KEY UPDATE name…