一、前言 前几天在Python铂金交流群【逆光】问了一个Pandas数据处理的问题,问题如下:请问 合并excel的两列,为空的单元格被另一列有值的替换。...【逆光】:好的,我去看看这个函数谢谢 【逆光】:我列表的两列不挨着, a b互补,我需要变成c (c 包含 a 和 b) 【Siris】:最笨的方法遍历判断呗 【逆光】:太慢了,我的数据有点多。...pandas里两列不挨着也可以用bfill。 【瑜亮老师】:@逆光 给出两个方法,还有其他的解决方法,就不一一展示了。 【逆光】:报错,我是这样写的。...我不写,就报这个错 【瑜亮老师】:有很多种写法,最简单的思路是分成3行代码。就是你要给哪一列全部赋值为相同的值,就写df['列名'] = '值'。不要加方括号,如果是数字,就不要加引号。...【瑜亮老师】:3列一起就是df.loc[:, ['列1', '列', '列3'']] = ["值", 0, 0] 【不上班能干啥!】:起始这行没有报错,只是警告,因为你这样操作会影响赋值前的变量。
定理2.1.4令A为n*n矩阵,若A有一行或者一列的元素全为0,则det(A)=0若A有两行或者两列相等,则det(A)=0若A有一行是另外一行的倍数,或者一列是另一列的倍数,则det(A)=0什么叫矩阵的秩...秩就是矩阵中行向量组或列向量组线性无关的个数。什么是行,列向量组?把矩阵的一行或者列看成一个向量,向量是什么?在二维平面的,就是X,Y的方向。从原点指向点x,y射线的方向。...更高维,就不能用方向来简单理解了。什么是线性无关?线性相关就是一组向量可以通过其他向量组数乘(实数也就是标量k),或加法,能得到,结果加起来等于0向量。相互抵消。如果不能等于0就是线性无关。...若A有一行或者一列为的元素全为0,则det(A)=0按行列式展开公式,一行的元素全0,相乘任何数都是0,所有行列式等于0.若A有一行是另外一行的倍数,或者一列是另一列的倍数,则det(A)=0若两行两列相等...,或者倍数,行列式交换两行两列,行列式的值要变号。
Excel中两列数据的差异对比,方法非常多,比如简单的直接用等式处理,到使用Excel2016的新功能Power Query(Excel2010或Excel2013可到微软官方下载相应的插件...一、简单的直接等式对比 简单的直接等式对比进适用于数据排列位置顺序完全一致的情况,如下图所示: 二、使用Vlookup函数进行数据的匹配对比 通过vlookup函数法可以实现从一个列数据读取另一列数据...vlookup函数除了适用于两列对比,还可以用于表间的数据对比,如下图所示: 三、使用数据透视进行数据对比 对于大规模的数据对比来说,数据透视法非常好用,具体使用方法也很简单,即将2列数据合并后...比如,有两个表的数据要天天做对比,找到差异的地方,原来用Excel做虽然也不复杂,但要频繁对比,就很麻烦了,因此,可以考虑使用Power Query来实现直接刷新的自动对比。...Excel里了 在线M函数快查及系列文章链接(建议收藏在浏览器中): https://app.powerbi.com/view?
的“条件格式”这个功能来筛选对比两列数据中心的重复值,并将两列数据中的相同、重复的数据按规则进行排序方便选择,甚至是删除。...比如上图的F、G两列数据,我们肉眼观察的话两列数据有好几个相同的数据,如果要将这两列数据中重复的数据筛选出来的话,我们可以进行如下操作: 第一步、选择重复值 1、将这两列数据选中,用鼠标框选即可; 2...,我这里按照默认设置); 4、上一步设置完,点击确定,我们可以看到我们的数据变成如下图所示: 红色显示部分就表示两列数据重复的几个数据。...第二步、将重复值进行排序 经过上面的步骤,我们将两列数据的重复值选出来了,但数据的排列顺序有点乱,我们可以做如下设置: 1、选中F列,然后点击菜单栏的“排序”》“自定义排序”,选择“以当前选定区域排序”...2、选中G列,做上述同样的排序设置,最后排序好的结果如下图: 经过上面的几个步骤,我们可以看到本来杂乱无章的两列数据现在就一目了然了,两列数据中的重复数据进行了颜色区分排列到了上面,不相同的数据也按照一定的顺序进行了排列
题意 给出两个字符串, 你需要修改第一个字符串,将所有与第二个字符串中相同的字符删除, 并且第二个字符串中不同的字符与第一个字符串的不同字符连接 样例 给出 s1 = aacdb, s2 = gafd...以 s1 = aacdb, s2 = gafd 为例 先将 s2 的每一个字符都放进 Map 集合中,将字符当作键,将值赋为 1,此时 Map 集合中应为: {"g':1, "a":1, "f":1,...然后将 s1 的每一个字符依次判断是否存在与 Map 集合的 Key 中,如果相等则将 集合中该 Key 的值变为 2,如果不相等,则将结果加入到字符串缓冲区中。...最后将 s2 再遍历一次,将在 Map 集合中 Value 为 1 的 Key 依次添加到字符串缓冲区中即可。...sb.append(c); } } return sb.toString(); } } 原题地址 Lintcode:连接两个字符串中的不同字符
连接两个字符串中的不同字符。 给出两个字符串, 你需要修改第一个字符串,将所有与第二个字符串中相同的字符删除, 并且第二个字符串中不同的字符与第一个字符串的不同字符连接。...样例 给出 s1 = aacdb, s2 = gafd 返回 cbgf 给出 s1 = abcs, s2 = cxzca; 返回 bsxz c++11中规定字符串可以直接相加,字符串对象可以加字符串常量...string::find()函数很好用,这里恰好可以做一个总结: 共有下面四种函数原型: 四种函数原型返回值都是size_t,即字符串的一个索引,如果找到返回索引,如果找不到返回-1,即string...//可以直接查找字符串对象, size_t find (const string& str, size_t pos = 0) const noexcept; c-string (2) //从类型的字符串...,定义一个新的string对象res,然后先遍历s1,在s2中寻找s1的每个字符,找不到的话就把这个字符加到res上,然后对s2做同样的操作,就能找到s2中和s1不同的字符了,这样最后加起来就只最终的res
首先:JOIN 通常与 ON 关键字搭配使用 其次我们来看我们的两个表格: table1: ? table2: ?...在这里,INNER JOIN(内连接,或等值连接):取得两个表中存在连接匹配关系的记录。...,它不管on中的条件是否为真,都会返回左边表中的记录。...在这里我们使用on 条件是 table1中的age1和table2中的age2相同,那么我们运行结果如下: ?...是否输出的结果把两表给结合起来了,你们发现,age1不同的数据并没有输出出来,其实这样的结果比较像数学中的交集呢?这个就是 INNER jion
第一篇潘大师(初识Pandas)教程考虑到篇幅问题只讲了最基础的列向索引,但这显然不能满足同志们日益增长的个性化服务(选取)需求。...在loc方法中,我们可以把这一列判断得到的值传入行参数位置,Pandas会默认返回结果为True的行(这里是索引从0到12的行),而丢掉结果为False的行,直接上例子: ?...此处插播一条isin函数的广告,这个函数能够帮助我们快速判断源数据中某一列(Series)的值是否等于列表中的值。...拿案例来说,df['流量来源'].isin(['二级','三级']),判断的是流量来源这一列的值,是否等于“二级”或者“三级”,如果等于(等于任意一个)就返回True,否则返回False。...要三个条件同时满足,他们之间是一个“且”的关系(同时满足),在pandas中,要表示同时满足,各条件之间要用"&"符号连接,条件内部最好用括号区分;如果是“或”的关系(满足一个即可),则用“|”符号连接
第一篇潘大师(初识Pandas)教程考虑到篇幅问题只讲了最基础的列向索引,但这显然不能满足同志们日益增长的个性化服务(选取)需求。...思路:行提取用判断,列提取输入具体名称参数。 此处插播一条isin函数的广告,这个函数能够帮助我们快速判断源数据中某一列(Series)的值是否等于列表中的值。...拿案例来说,df['流量来源'].isin(['二级','三级']),判断的是流量来源这一列的值,是否等于“二级”或者“三级”,如果等于(等于任意一个)就返回True,否则返回False。...先看看均值各是多少: 再判断各指标列是否大于均值: 要三个条件同时满足,他们之间是一个“且”的关系(同时满足),在pandas中,要表示同时满足,各条件之间要用"&"符号连接,条件内部最好用括号区分...;如果是“或”的关系(满足一个即可),则用“|”符号连接: 这样连接之后,返回True则表示该渠道同时满足访客、转化率、客单价都高于均值的条件,接下来我们只需要把这些值传入到行参数的位置。
2, 列3 别名3 FROM ...; 注意: 别名是存在于内存中的,而WHERE仅适用于硬盘,但是HAVING既可以针对硬盘,也可以针对内存条件进行查询; 分页查询 经排序后获取结果中第M条开始后N...条记录; -- MySQL中两句等效 SELECT FROM ORDER BY LIMIT OFFSET ; SELECT FROM ORDER...BY LIMIT , ; 聚合查询 常用聚合函数 函数 说明 SUM 计算某一列的合计值,该列必须为数值类型 AVG 计算某一列的平均值,该列必须为数值类型 MAX 计算某一列的最大值...MIN 计算某一列的最小值 COUNT 统计某一列的个数 多表查询(笛卡尔查询) SELECT * FROM 注意:多表查询时,使用表名.列名的方式,以防止结果集列名重复问题...等子句; 外连接 RIGHT OUTER JOIN:返回右表均存在的行; LEFT OUTER JOIN:返回左表均存在的行; FULL OUTER JOIN:将两张表中所有记录均选出来,且自动将对方不存在的列填充为
, 列2 别名2, 列3 别名3 FROM ...; image 注意:别名是存在于内存中的,而WHERE仅适用于硬盘,但是HAVING既可以针对硬盘,也可以针对内存条件进行查询; 分页查询 经排序后获取结果中第...M条开始后N条记录; -- MySQL中两句等效 SELECT FROM ORDER BY LIMIT OFFSET ; SELECT FROM ORDER BY LIMIT , ; image 聚合查询 常用聚合函数 函数 说明 SUM 计算某一列的合计值,该列必须为数值类型 AVG 计算某一列的平均值,该列必须为数值类型...MAX 计算某一列的最大值 MIN 计算某一列的最小值 COUNT 统计某一列的个数 image image 多表查询(笛卡尔查询) SELECT * FROM image 注意...外连接 RIGHT OUTER JOIN:返回右表均存在的行; LEFT OUTER JOIN:返回左表均存在的行; FULL OUTER JOIN:将两张表中所有记录均选出来,且自动将对方不存在的列填充为
部分列查询 部分列查询指的是只需要显示表中的某几列,此时需要罗列出每个列的名称,用逗号隔开,所声明的列的名称必须与表中已经定义的列名相同。...使用LIKE时,需要和通配符一同使用,经常与LIKE搭配的通配符如下: %:任意个数的任意字符,包括0个字符 _:任意的单个字符 SELECT * FROM Teacher WHERE T_name LIKE...查询单列 如果只查询一列的数据,得到的就是这一列去重后的结果: SELECT DISTINCT Course_no FROM Choice; ?...查询多列 如果查询的列有多个,将会显示这两个列的唯一组合,也就是说如果单独看某一列数据,很有可能会有重复数据,但这些列的数据的组合一定是唯一的。...AND 在WHERE中可以使用AND连接两个条件,代表同时成立。 2. OR 在WHERE中可以使用OR连接两个条件,代表成立其一即取出数据。 3.
他能唯一地标识表中的一条记录,可以结合外键来定义不同数据表之间的关系,并且可以加快数据库查询的速度。 单字段主键 在定义列的同时指定主键。...其位置放置在定义完所有的主键之后 使用外键约束 外键用来在两个表的数据之间建立链接,它可以是一列或者多列。一个表可以有一个或多个外键。...字段名 数据类型 NOT NULL 使用唯一性约束 唯一性约束要求该列唯一,允许为空,但只能出现一个空值。 唯一约束可以确保一列或者几列不出现重复值。 在定义完列之后直接指定唯一约束。...但是ROLLUP和能够与 GROUP BY同时使用的ORDER BY不能同时使用。...) 返回某列的最小值 SUM() 返回某列值的和 连接查询 内连接查询 在内连接查询中,只有满足条件的记录才能出现在结果关系中。
什么是表 表(table):是一种结构化的文件,可用来存储某种特定类型数据,对于MySQL数据库中的表,可以简单地类比为Excel工作表。 表的结构 一张数据表包含了表名、列、列名以及行。...列(column):表中的一个字段,所有表都是由一个或多个列组成的。 行(row):表中的数据是按行存储的,每一行也称为一个记录(record)。...学生表 主键 主键(primary key):在关系表中,任意两行数据不能重复,也就是必须拥有可以唯一标识自己的一列,这一列就称为主键。...数据类型 数据类型(datatype):每个表列都有相应的数据类型,它限制(或容许)该列中存储的数据。...两种常用的图形化管理工具: phpMyAdmin(如果安装了xampp就已经有了,网页形式,免费) Navicat(客户端形式,收费) 管理MySQL 数据库操作 连接数据库 下面用Navicat演示一下在图形化界面的情况下
确保某列(或两个列多个列的结合)有唯一标识,有助于更容易更快速地找到表中的一个特定的记录。 注:一张表里只能有一个 primary key....有两种方式可以添加主键约束: 在定义列的同时指定主键 在定义完字段之后,再指定主键 注:一张表只能有且仅有一个主键 小知识:主键自动生成索引 4.2.6 FOREIGN KEY:外键约束 外部关键字 在以后...答:外键的主要作用就是保持数据的一致性,完整性。 如图有两张表,classId 是 T_Student 的外键,同时是 T_class 表的主键。...WHERE 语句,而需要用HAVING 4.2.6 联合查询 ① 内连接 内连接是最常用的联接类型,它返回两个表中匹配的记录。...更新性能:虽然索引能提高查询速度,但插入、更新和删除操作可能会变得较慢,因为每次数据修改时,索引也需要被更新。 选择性:索引对于具有高选择性的列(即列中唯一值较多)效果更好。
约束确保了数据库中数据的准确性和可靠性。 约束可以是列级或表级。列级约束仅适用于列,表级约束被应用到整个表。 常用的约束: NOT NULL:指示某列不能存储 NULL 值。...确保某列(或两个列多个列的结合)有唯一标识,有助于更容易更快速地找到表中的一个特定的记录。。 设置 UNIQUE 的列可能有多个,但是一张表只有一列可以设置 PRIMARY KEY。...EXCLUSION 约束确保如果使用指定的运算符在指定列或表达式上比较任意两行,至少其中一个运算符比较将返回 false 或 null。...INNER JOIN:内连接 内连接(INNER JOIN)根据连接谓词结合两个表(table1 和 table2)的列值来创建一个新的结果表。...RIGHT OUTER JOIN:右外连接 首先,执行内部连接。然后,对于表T2中不满足表T1中连接条件的每一行,其中T1列中的值为空也会添加一个连接行。
创建表后你就无法真正的改变列的顺序了。最多只能在指定位置添加新列,然后删除旧列,但是这样会失去旧列中的所有数据。 如果我已经创建了主键,然后又意外的想改用另一列呢?...不能单纯的使用另一张表的键,称之为外键,而不加上约束吗? A:其实可以,但创建成外键约束后,就只能插入已经存在于父表中的值,有助于加强两张表间的连接。 加强连接?是什么意思?...数据模式:一对多 A表的某一条记录可以对应到B表的多条记录,但B表中的一条记录只能对应A表中的某一条记录。 ? 连接线应该带有黑色箭头来表示一对多的连接关系。 ? 数据模式:多对多 ?...第二范式(2NF) 符合1NF 没有部分函数依赖性 函数依赖性 当某列的数据必须随着另一列的数据改变而改变时,表示第一列函数依赖与第二列。...自然联接 属于内联接的一种。 自然联接只有在联接的列在两张表中的名称相同时才会用。 ?
,math from exam; 查询的结果是一个表达式,例如,在查询命令中添加一个数值,每一列都会有这个数值 select id ,name ,10 from exam; 之后,可以通过as关键字来为查询结果中的列指定别名...,as和引号可以省略,但如果别名中存在空格就不能省略引号了 select id as '编号' ,name as '姓名' from exam; 列与列之间还可以进行运算: select chinese...来实现的,在之前的math中,是存在一个重复的98的,我们来试验一下去重查询操作: select distinct math from exam; 有一点需要注意的是,在查询结果中,每一列都相同才认为是重复数据...外连接又分为左外连接和右外连接 内连接和外连接的区别: 内连接只会查询到两个表的交集部分,外连接可以查询左边或右边整个表 2.2.1右外连接 右链接就是以 join 右边的表为基准,显示这个表的全部数据...按照同一个学生,同一门课程,同样的成绩这三个列同时去分组,然后分组之后在 having字句中用count(*)判断分组中的记录数 select student_id, course_id, score
1.2 横向合并 横向合并涉及到连接问题,为方便理解,我们构造一些更有代表性的数据集练手: 两个DataFrame是两张成绩表,h1是5位同学的数学、英语、语文成绩,h2是4位同学的篮球和舞蹈成绩,现在想找到并合并两张表同时出现的同学及其成绩...left_index与right_index是当我们用索引(这两个表的名字在索引中)连接时指定的参数,设置为on表示用该表的索引作为连接的条件(或者说桥梁)。...假设姓名是单独的一列值,且需要根据姓名进行匹配,那就需要用“left_on = '姓名',right_on = '姓名'”,我们可以分别指定左表的匹配列和右表的匹配列。...how是指定连接方式,这里用的inner,表示我们基于姓名索引来匹配,只返回两个表中共同(同时出现)姓名的数据。下面详解一下inner还涉及到的其他参数——left,right,outer。...上文我们合并后的df数据集就是有缺失数据的: 要删除空值,一个dropna即可搞定: dropna函数默认删除所有出现空值的行,即只要一行中任意一个字段为空,就会被删除。
同一个表的所有记录都有相同的字段定义。 对于关系表,有个很重要的约束,就是任意两条记录不能重复。不能重复不是指两条记录不完全相同,而是指能够通过某个字段唯一区分出不同的记录,这个字段被称为主键。...索引 ---- 在关系数据库中,如果有上万甚至上亿条记录,在查找记录的时候,想要获得非常快的速度,就需要使用索引。 索引是关系数据库中对某一列或多个列的值进行预排序的数据结构。...但是,这些列根据业务要求,又具有唯一性约束:即不能出现两条记录存储了同一个身份证号。这个时候,就可以给该列添加一个唯一索引。...,但查询的结果仍然是一个二维表,只是这个二维表只有一行一列,并且列名是COUNT(*)。...你可能还注意到了,上述查询的结果集有两列id和两列name,两列id是因为其中一列是students表的id,而另一列是classes表的id,但是在结果集中,不好区分。