检查执行计划，是否走索引检查where和order by字段是否有索引，根据表的数据量和现有索引，考虑是否增加索引或者联合索引。...选择性：选择性是指索引列中不同值的数量与表中记录数的比率。选择性高的列（即列中有很多唯一的值）更适合创建索引。...如果想要保留重复的记录，可以使用UNION ALL操作符，例如： 判断两条记录是否为重复记录的标准是通过比较每个字段的值来确定的。...如果左表中没有匹配的行，则返回 NULL 值。...(lastKey, pageSize); // 如果没有更多数据，可以设置下一个lastKey为空或特定值（如-1） Long nextLastKey = items.isEmpty
数据表检查的另一个目的是了解数据的概况，例如整个数据表的大小，所占空间，数据格式，是否有空值和重复项和具体的数据内容。为后面的清洗和预处理做好准备。 ...类似与 Excel 中删除重复项后的结果。 ...“删除重复项”的功能，可以用来删除数据表中的重复值。...我们以数据表中的 city 列为例，city 字段中存在重复值。默认情况下 drop_duplicates()将删除后出现的重复值(与 excel 逻辑一致)。...Where 函数用来对数据进行判断和分组，下面的代码中我们对 price 列的值进行判断，将符合条件的分为一组，不符合条件的分为另一组，并使用 group 字段进行标记。
on 连接条件where 筛选条件group by 分组列表having 分组后的筛选order by 排序列表limit 子句; 特点： ①查询的结果=主表中所有的行，如果从表和它匹配的将显示匹配行...into 表名(字段名,...) values(值,...); 特点： 1、要求值的类型和字段的类型要一致或兼容 2、字段的个数和顺序不一定与原始表中的字段个数和顺序一致 但必须保证值和字段一一对应...NOT NULL：非空，该字段的值必填 UNIQUE：唯一，该字段的值不可重复 DEFAULT：默认，该字段的值不用手动插入有默认值 CHECK：检查，mysql不支持 PRIMARY KEY：主键，...该字段的值不可重复并且非空 unique+not null FOREIGN KEY：外键，该字段的值引用了另外的表的字段 主键和唯一 1、区别： ①、一个表至多有一个主键，但可以有多个唯一 ②、主键不允许为空...，中间用空格隔开，没有顺序要求 三、修改表时添加或删除约束 1、非空 添加非空 alter table 表名 modify column 字段名 字段类型 not null; 删除非空 alter table
，候选键只有一个属性或者全部属性才能构成一个候选键 6.关系数据库的数据完整性 -- 实体完整性 --即主键值唯一且不能为空值 -- 参照完整性 --一个表的外键值要么为空要么就是其他表中的某一个主键值...等值连接 --条件运算符是等号的连接 非等值连接 即一般的条件判断连接，符合规则然后连接 --还有一些概念，例如左外连接，右外连接，全外连接，即连接时如果没有匹配到值做的一些处理，将没有值的部分置为空值...ALTER TABLE student add constraint key PRIMARY key(sno) 非空约束 作用：使得插入的数据不能为空值 --这里就是创建了一个非空约束 create...，将数据按照一定的原则进行排序 --涉及到几个比较常见的聚集函数 --count，min，max，avg，sum --count(*)代表统计全部的数据包括空值，count(具体列名)则代表非空的数据...sql语句 相关子查询 --顾名思义就是子查询与主要的查询直接有关系 --例如 一些注意事项 -- between and 包括范围点 -- like匹配符匹配中文时也将中文看成一个字符 -
表示在一个连续的范围内 eg：where id in (8, 10, 13) f、空判断 注意：null与""是不同的 判断空：is null...b、max(列) 表示求此列的最大值 c、min(列) 表示求此列的最小值 d、sum(列) 表示求此列的和 e、avg(列) 表示求此列的平均值5、分组...按照字段分组，表示此字段相同的数据会被放到一个集合中。...B匹配的行会出现在结果集中 2、表A left join 表B 表A与表B匹配的行会出现在结果集中，外加表A中独有的数据，未对应的数据使用null填充 3、表A right join...表B 表A与表B匹配的行会出现在结果集中，外加表B中独有的数据，未对应的数据使用null填充 交互 进行python与mysql的交互需要安装pymysql库，安装也很简单，常规的pip
() # 检查DataFrame对象中的空值，并返回一个Boolean数组 pd.notnull() # 检查DataFrame对象中的非空值，并返回一个Boolean数组 df.dropna() #...删除所有包含空值的行 df.dropna(axis=1) # 删除所有包含空值的列 df.dropna(axis=1,thresh=n) # 删除所有小于n个非空值的行 df.fillna(value=...x) # 用x替换DataFrame对象中所有的空值，支持df[column_name].fillna(x) s.astype(float) # 将Series中的数据类型更改为float类型 s.replace...') # 将df2中的列添加到df1的尾部,值为空的对应行与对应列都不要 df1.join(df2.set_index(col1),on=col1,how='inner') # 对df1的列和df2的列执行...df.mean() # 返回所有列的均值 df.corr() # 返回列与列之间的相关系数 df.count() # 返回每一列中的非空值的个数 df.max() # 返回每一列的最大值 df.min
[CONSTRAINT] FOREIGN KEY 字段1[,字段2...] REFERENCES 主键列1[,主键列2...] 使用非空约束 非空约束指字段的值不能为空。...对于使用了非空约束的字段，如果用户在添加数据时没有指定值，数据库系统会报错。 字段名 数据类型 NOT NULL 使用唯一性约束 唯一性约束要求该列唯一，允许为空，但只能出现一个空值。...,字段名n] FROM 表名 WHERE 查询条件; 带 IN关键字的查询 IN操作符用来查询满足指定范围内的条件的记录，使用 IN操作符，将所有检索条件用括号括起来，检索条件之间用逗号隔开，只要满足条件范围内的一个值即为匹配项...百分号通配符 %，匹配任意长度的字符，甚至包括零字符。 下划线通配符 _ ，一次只能匹配任意一个字符。 查询空值 空值不同于0，也不同于空字符串。空值一般表示数据未知、不适用或将在以后添加数据。...带 EXISTS关键字的子查询 EXISTS关键字后面的参数是一个任一的子查询，系统对子查询进行运算以判断它是否返回行，如果至少返回一行，那么 EXISTS的结果为 true，此时外层查询语句将进行查询
< 大于等于 BETWEEN 在两个值之间 IS NULL 为 NULL 值 应该注意到，NULL 与 0、空字符串都不同。 AND 和 OR 用于连接多个过滤条件。...IN 操作符用于匹配一组值，其后也可以接一个 SELECT 子句，从而匹配子查询得到的一组值。 NOT 操作符用于否定一个条件。 十、通配符 通配符也是用在过滤语句中，但它只能用于文本字段。...十三、分组 分组就是把具有相同的数据值的行放在同一组中。 可以对同一分组数据使用汇总函数进行处理，例如求分组数据的平均值等。 指定的分组字段除了能按该字段进行分组，也会自动按该字段进行排序。...预读过程中，磁盘进行顺序读取，顺序读取不需要进行磁盘寻道，并且只需要很短的旋转时间，速度会非常快。 操作系统一般将内存和磁盘分割成固定大小的块，每一块称为一页，内存与磁盘以页为单位交换数据。...当线程A要更新数据值时，在读取数据的同时也会读取version值，在提交更新时，若刚才读取到的version值为当前数据库中的version值相等时才更新，否则重试更新操作，直到更新成功。
不能按列别名指定字段；尝试这样做会生成SQLCODE-29错误。不能按列号指定字段；这将被解释为文字，并返回一行。将文字指定为DISTINCT子句中的项值将返回1行；返回哪行是不确定的。...可以使用子查询实现DISTINCT、聚合函数和GROUP BY的预期组合。 字母大小写与DISTINCT优化 根据为字段定义的排序规则类型，将字符串值不同地分组在一起。...默认情况下，字符串数据类型字段使用SQLUPPER排序规则定义，该排序规则不区分大小写。 如果字段/特性排序规则类型为SQLUPPER，则分组的字段值将全部以大写字母返回。...DISTINCT BY(StreamField)将流字段为空的记录数减少到一个空记录。 星号语法：DISTINCT*语法是合法的，但没有意义，因为根据定义，所有行都包含一些不同的唯一标识符。...如果SELECT包含FROM子句，则在一行中指定DISTINCT结果将包含这些非表值；如果未指定DISTINCT(或TOP)，则SELECT将产生与FROM子句表中的行数相同的行数。
sql 语句中 有时候1 代表对应的 第一个字段，第二个字段 一次类推。 去除重复 distinct（） 只能放在开头 一般作用一个元素。...group by 分组表达式 指定 GROUP BY 时，先排序后分组，选择列表中任一非聚合表达式内的所有列都应包含在 GROUP BY 列表中（没有群组函数都应该包含在group by）或者 GROUP...放在两个select中间，只是将两个结果联结起来一起显示，并不是联结两个表UNION ALL 这个指令的目的也是要将两个 SQL 语句的结果合并在一起。...tableName limit i,n # tableName：表名 # i：为查询结果的索引值(默认从0开始)，当i=0时可省略i # n：为查询结果返回的数量 # i与n之间使用英文逗号”...end相匹配 列出爵士的獲獎者、年份、獎頁(爵士的名字以Sir開始)。
但是由于各种各样的数据库出现，导致很多不同版本的 SQL 语言，为了与 ANSI 标准相兼容，它们必须以相似的方式共同地来支持一些主要的关键词（比如 SELECT、UPDATE、DELETE、INSERT...语法： UPDATE 表名称 SET 列名称 = 新值 WHERE 列名称 = 某值; 实例： 更新某一行中的一个列： 目前 Persons 表有很多字段为 null 的数据，可以通过 UPDATE 为...数据库中的表可通过键将彼此联系起来。主键（Primary Key）是一个列，在这个列中的每一行的值都是唯一的。在表中，每个主键的值都是唯一的。...同时，每条 SELECT 语句中的列的顺序必须相同。 NOT NULL – 非空 NOT NULL 约束强制列不接受 NULL 值。 NOT NULL 约束强制字段始终包含值。...VIEW – 视图 在 SQL 中，视图是基于 SQL 语句的结果集的可视化的表。 视图包含行和列，就像一个真实的表。视图中的字段就是来自一个或多个数据库中的真实的表中的字段。
数据表检查 数据表检查的目的是了解数据表的整体情况，获得数据表的关键信息、数据的概况，例如整个数据表的大小、所占空间、数据格式、是否有 空值和重复项和具体的数据内容，为后面的清洗和预处理做好准备。...Isnull是Python中检验空值的函数 #检查数据空值 df.isnull() ? #检查特定列空值 df['price'].isnull() ?...6.删除重复值 Excel的数据目录下有“删除重复项”的功能 ?...在Python中使用split函数实现分列在数据表中category列中的数据包含有两个信息，前面的数字为类别id，后面的字母为size值。中间以连字符进行连接。...Python中通过pivot_table函数实现同样的效果 #设定city为行字段，size为列字段，price为值字段。 分别计算price的数量和金额并且按行与列进行汇总。
NOT NULL – 非空 ???? VIEW – 视图 ???? SQL 常用函数学习 ???? AVG – 平均值 ???? COUNT – 汇总行数 ???? MAX – 最大值 ????...语法： UPDATE 表名称 SET 列名称 = 新值 WHERE 列名称 = 某值; 实例： 更新某一行中的一个列： 目前 Persons 表有很多字段为 null 的数据，可以通过 UPDATE 为...数据库中的表可通过键将彼此联系起来。主键（Primary Key）是一个列，在这个列中的每一行的值都是唯一的。在表中，每个主键的值都是唯一的。...NOT NULL – 非空 NOT NULL 约束强制列不接受 NULL 值。 NOT NULL 约束强制字段始终包含值。这意味着，如果不向字段添加值，就无法插入新记录或者更新记录。...VIEW – 视图 在 SQL 中，视图是基于 SQL 语句的结果集的可视化的表。 视图包含行和列，就像一个真实的表。视图中的字段就是来自一个或多个数据库中的真实的表中的字段。
区分规则维度有助于： 将维度与业务需求相匹配，并且划分评估的先后顺序； 了解从每一维度的评估中能够/不能够得到什么； 在时间和资源有限的情况下，更好地定义和管理项目计划中的行动顺序。...如客户开户时，客户名称是必填项，不能出现为空的情况。 非空约束 非空约束比较容易理解，简单的讲就是字段不能为空，检查方式也比较容易，只需要设定需要检查的字段，通过 sql 查询列值不能为空即可。...将为空的数据查询出来进行整改。 当然非空约束可以通过设置非空约束的方式限制数据无法写入数据库，如果支持这种方式可以避免事后的数据非空检查。 ?...这种情况的如果是单一的业务主键，可以通过对主键分组去重的方式检查，如果是业务联合属性判断唯一实体的情况只能业务人员进行手动检查。 ?...如“金融机构编码”在《人民银行金融机构编码规范》中规定长度为14位，如果出现非14位的值，则判定为不满足长度约束，不是一个有效的“金融机构编码”； 内容规范约束：描述检核对象的值是否按照一定的要求和规范进行数据的录入与存储
NULL但是实际也是插入的非NULL值; 主键约束:默认就是不能为空并且唯一，一张表只能有一个主键，常常供外键使用 (2) 外键约束 描述:外键是搭配主键使用可以为空值（看做主键的子集），若不为空值则每一个外键值必须等于另外一个表中主键的某值...:用于约束对应列中的值的默认值，除非默认值为空值否则不可以插入空值; CREATE TABLE IF NOT EXISTS T2 ( name VARCHAR(10) NOT NULL, sex...(WHERE排除的数据不参加分组),而分组中的HAVING可以直接接聚合函数在分组之后过滤数据; 注:总结出查询的SQL语句的编写顺序:SELECT ....原子DDL语句将数据字典更新，存储引擎操作以及与DDL操作关联的二进制日志写入操作组合到单个原子事务中。...，而后者一条一条删除表中的数据):执行速度，隐式提交因此无法回滚，只要表定义有效即使数据或索引文件已损坏也能重新创建空白表,将AUTO_INCREMENT值重置为其初始值,不调用ON DELETE触发器
= 六利用变量查询数值型数据 SELECT * FROM tb_name WHERE id = ‘$_POST[text]’ 注:利用变量查询数据时，传入SQL的变量不必用引号括起来，因为PHP中的字符串与数值型数据进行连接时... WHERE 查询条件 注:SQL语句中的DISTINCT必须与WHERE子句联合使用，否则输出的信息不会有变化 ,且字段不能用*代替 十六NOT与谓词进行组合条件的查询 (1)NOT BERWEEN... … AND … 对介于起始值和终止值间的数据时行查询 可改成 终止值 (2)IS NOT NULL 对非空值进行查询 (3)IS NULL 对空值进行查询 (4)NOT IN...二十对统计结果进行排序 函数SUM([ALL]字段名) 或 SUM([DISTINCT]字段名),可实现对字段的求和，函数中为ALL时为所有该字段所有记录求和,若为DISTINCT则为该字段所有不重复记录的字段求和... by排序语句order by同时出现在SQL语句中时，要将分组语句书写在排序语句的前面，否则会出现错误 二十二多列数据分组统计 多列数据分组统计与单列数据分组统计类似 SELECT *，SUM(字段
服务器 Database Tables 数据库中以表为组织单位存储数据 表类似 Java 中的类,每个字段都有对应的数据类型 对比 Java 程序与关系型数据库 类 = 表 类中属性 = 表中字段 对象...SQL 语句可以单行或者多行书写，以分号结尾 ; （Sqlyog 中可以不用写分号，但建议加上） 可以使用空格和缩进来增加语句的可读性。...违反约束的不正确数据，将无法插入到表中。 Primary Key -- 主键约束 主键约束是不可重复的、唯一的、非空的，用来表示数据库中的每一条记录。...非空约束的特点：某一列不予许为空。...主键约束与唯一约束的区别：1. 主键约束是唯一的且不能够为空，唯一约束是唯一的但可以为空；2. 一个表中只能有一个主键，但是可以有多个唯一约束。
（返回指定小数的位数的表达式的值），sign（返回某个数的符号），sin（返回以弧度为单位的角度的正弦值），sqrt,tan show databases;语句查看MySQL服务器中的所有数据库...all是默认值，distinct取消结果集中的重复行。 group by用于对查询结果根据grouping_columns的值进行分组。...（一个字段值是否为空，要表示为“is null”或“is not null”），不能表示为=null或null。...左外连接left outer join：返回指定左表的全部行+右表中对应的行，如果左表中的数据在右表中没有与其匹配的行，则再查询结果集中相应位置显示为空值。...右外连接Right Outer Join 右外连接right outer join：返回指定右表的全部行+左表中对应的行，如果右表中的数据在左表中没有与其匹配的行，则再查询结果集中相应位置显示为空值。
= 六、利用变量查询数值型数据 SELECT * FROM tb_name WHERE id = ‘$_POST[text]’ 注:利用变量查询数据时，传入SQL的变量不必用引号括起来，因为PHP中的字符串与数值型数据进行连接时...字段名 FROM 表名 WHERE 查询条件 注:SQL语句中的DISTINCT必须与WHERE子句联合使用，否则输出的信息不会有变化 ,且字段不能用*代替 十六、NOT与谓词进行组合条件的查询 (1...)NOT BERWEEN … AND … 对介于起始值和终止值间的数据时行查询 可改成 终止值 (2)IS NOT NULL 对非空值进行查询 (3)IS NULL 对空值进行查询...二十、对统计结果进行排序 函数SUM([ALL]字段名) 或 SUM([DISTINCT]字段名),可实现对字段的求和，函数中为ALL时为所有该字段所有记录求和,若为DISTINCT则为该字段所有不重复记录的字段求和...by排序语句order by同时出现在SQL语句中时，要将分组语句书写在排序语句的前面，否则会出现错误 二十二、多列数据分组统计 多列数据分组统计与单列数据分组统计类似 SELECT *，SUM(字段1
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
