因此，在今天的文章中，我们将展示如何使用 query() 方法对数据框执行查询 获取数据 我们使用 kaggle 上的 Titanic 数据集作为本文章的测试数据集，下载地址如下： https://www.kaggle.com...，该方法将结果作为 DataFrame 返回，原始 DataFrame 保持不变。...指定多个条件查询 我们可以在查询中指定多个条件，例如假设我想获取所有从南安普敦 (‘S’) 或瑟堡 (‘C’) 出发的乘客。...，我们可以使用 isnull() 方法查找缺失值： df.query('Embarked.isnull()') 现在将显示 Embarked 列中缺少值的行： 其实可以直接在列名上调用各种 Series...我们还可以轻松比较数字列： df.query('Fare > 50') 以下输出显示了票价大于 50 的所有行： 比较多个列 还可以使用 and、or 和 not 运算符比较多个列，以下语句检索 Fare
pivot 与 unpivot 函数是SQL2005新提供的2个函数，PIVOT 通过将表达式某一列中的唯一值转换为输出中的多个列来旋转表值表达式，并在必要时对最终输出中所需的任何其余列值执行聚合。...UNPIVOT 与 PIVOT 执行相反的操作，将表值表达式的列转换为列值。 ...Sup_Name（供应商)作为列值显示。...将与 PIVOT 执行几乎完全相反的操作，将列转换为行,但是也不是完全的相同，PIVOT 会执行一次聚合，从而将多个可能的行合并为输出中的单个行。...另外，UNPIVOT 的输入中的空值不会显示在输出中，而在执行 PIVOT 操作之前，输入中可能有原始的空值。 3.动态处理和静态处理不一样的地方在于列转行的数量。
所以要过滤pandas DataFrame，需要做的就是在查询函数中指定条件即可。 使用单一条件进行过滤 在单个条件下进行过滤时，在Query（）函数中表达式仅包含一个条件。...在多个条件过滤 一个或多个条件下过滤，query（）的语法都保持不变 但是需要指定两个或多个条件进行过滤的方式 and：回在满足两个条件的所有记录 or：返回满足任意条件的所有记录 示例2 查询数量为95...将文本值包装在单个引号“”中，就可以了 示例5 想获得即状态“未发货”所有记录，可以在query（）表达式中写成如下的形式： df.query("Status == 'Not Shipped'") 它返回所有记录...与数值的类似可以在同一列或不同列上使用多个条件，并且可以是数值和非数值列上条件的组合。...日期时间列过滤 使用Query（）函数在日期时间值上进行查询的唯一要求是，包含这些值的列应为数据类型dateTime64 [ns] 在示例数据中，OrderDate列是日期时间，但是我们的df其解析为字符串
使用单一条件进行过滤 在单个条件下进行过滤时，在Query（）函数中表达式仅包含一个条件。返回的输出将包含该表达式评估为真的所有行。...在多个条件过滤 一个或多个条件下过滤，query（）的语法都保持不变 但是需要指定两个或多个条件进行过滤的方式 and：回在满足两个条件的所有记录 or：返回满足任意条件的所有记录 示例2 查询数量为95...将文本值包装在单个引号“”中，就可以了。...与数值的类似可以在同一列或不同列上使用多个条件，并且可以是数值和非数值列上条件的组合。 除此以外， Pandas Query（）还可以在查询表达式中使用数学计算。...日期时间列过滤 使用Query（）函数在日期时间值上进行查询的唯一要求是，包含这些值的列应为数据类型dateTime64 [ns] 在示例数据中，OrderDate列是日期时间，但是我们的df其解析为字符串
使用单一条件进行过滤 在单个条件下进行过滤时，在Query（）函数中表达式仅包含一个条件。返回的输出将包含该表达式评估为真的所有行。...在多个条件过滤 一个或多个条件下过滤，query()的语法都保持不变 但是需要指定两个或多个条件进行过滤的方式 and：回在满足两个条件的所有记录 or：返回满足任意条件的所有记录 示例2 查询数量为95...将文本值包装在单个引号“”中，就可以了。...与数值的类似可以在同一列或不同列上使用多个条件，并且可以是数值和非数值列上条件的组合。 除此以外， Pandas中的query()方法还可以在查询表达式中使用数学计算。...日期时间列过滤 使用query()函数在日期时间值上进行查询的唯一要求是，包含这些值的列应为数据类型dateTime64 [ns] 在示例数据中，OrderDate列是日期时间，但是我们的df其解析为字符串
(MySQL 5.5版本后默认) 使用场景：对事务的完整性有比较高的要求，在并发条件下要求数据的一致性，读写频繁的操作！ MEMORY 存储引擎：内存存储，速度快，不安全。适合小量快速访问的数据。...唯一索引：索引列的值必须唯一，但允许有空值。如果是组合索引，则列值组合必须唯一。 主键索引：一种特殊的唯一索引，不允许有空值。在建表时有主键列同时创建主键索引。...是将索引存储在.myi文件中，将数据存储在.myd文件中，先去myi文件中找到数据的磁盘地址，再去myd文件中根据地址直接获取数据。...需要用户自己去实现，不会发生并发抢占资源，只有在提交操作的时候检查是否违反数据完整性。 方式一：给数据表中添加一个 version 列，每次更新后都将这个列的值加 1。...方式二：和版本号方式基本一样，给数据表中添加一个列，名称无所谓，数据类型需要是 timestamp。 每次更新后都将最新时间插入到此列。 读取数据时，将时间读取出来，在执行更新的时候，比较时间。
如果应用对事务的完整性有比较高的要求，在并发条件下要求数据的一致性，数据操作除了插入和查询之外，还包含很多的更新、删除操作，那么 InnoDB 存储引擎是比较合适的选择。...可以有多个 UNIQUE 常规索引 快速定位特定数据 可以有多个 全文索引 全文索引查找的时文本中的关键词，而不是比较索引中的值 可以有多个 FULLTEXT 在 InnoDB 存储引擎中，根据索引的存储形式...Index) 将数据于索引分开村塾，索引结构的叶子节点关联的是对应的主键 可以存在多个 聚集索引选取规则： 如果存在主键，主键索引就是聚集索引。...要控制索引的数量，索引并不是多多益善，索引越多，维护索引结构的代价也就越大，会影响增删改的效率。 如果索引列不能存储 NULL 值，请在创建表时使用 NOT NULL 约束它。...当优化器知道每列是否包含 NULL 值时，它可以更好地确定哪个索引最有效地用于查询。
图5 ColRename: 这个类用于对指定列名进行重命名，其主要参数如下： rename_map：字典，传入旧列名->新列名键值对 下面是举例演示： 列重命名 # 将budget重命名为...图6 ColReorder: 这个类用于修改列的顺序，其主要参数如下： positions：字典，传入列名->新的列下标键值对 下面是举例演示： 修改列位置 # 将budget从第0列挪动为第...图12 RowDrop: 这个类用于删除满足指定限制条件的行，主要参数如下： conditions：dict型，传入指定列->该列删除条件键值对 reduce：str型，用于决定多列组合条件下的删除策略...型，决定是否在计算完成后把旧列删除，默认为True，即对应列的计算结果直接替换掉对应的旧列 suffix：str型，控制新列后缀名，当drop参数设置为False时，结果列的列名变为其对应列+suffix...，默认为None，即对全部类别型变量进行哑变量处理 dummy_na：bool型，决定是否将缺失值也作为哑变量的一个类别进行输出，默认为False即忽略缺失值 exclude_columns：list，
很多时候，我们在写公式时，都需要进行跨表的数据引用，比如要通过函数引用其他表的数据参与计算，或做匹配等，经常要拿着鼠标到处找需要引用的那一列或那个区域，尤其当数据表很大、列数很多的时候，...此时，如果还有多个表的话，我们可以通过键盘的上下箭头进行表的选择，当选到我们需要的表时，按Tab键即选中该表进入公式。...Step04-在公式中仅引用某列的当前行 为完成"学生姓名"的提取，我们继续，到match的时候，我们的lookup_value可是要用当前行的值，怎么办？...是的，在Excel的"表格"中，对"[列名]"表示对整列的引用，"[@列名]"表示对该列当前行的引用，如下图所示： Step05-公式的自动填充 公式全部输入完毕后，回车，该公式将自动填充到该列的所有单元格中...如下图所示： 至此，通过在公式输入时得到的提示，快速地实现了跨表的引用，当你开始习惯了这种输入的方法后，你将会发现原来通过鼠标到处找数据的过程是多么的痛苦，尤其是表很多、列很多的时候！
小勤：但是有个问题啊，比如构造出来行标和列标了，但通过表里转换的列标是文本，在PQ里用跨表引用数据的方式好像不行呢。 大海：嗯。用列标名称引用的话，需要用个函数。...首先，我们回顾一下《多个格式表单批量转换汇总》里的代码： 其中用红框框出来的内容是咱们修改的自定义函数，固定了列名和引用的位置，用红色荧光笔画出来的内容是在操作展开数据或删除其他列时自动生成的固定列名...大海：这个我先把改好的给你，然后再跟你解析： 这个在自定义函数里面还是将要提取数据的表作为参数（s）传进去，构建table的列名由原来的固定内容改为从配置（映射表）里取，所以改为：映射表[内容]，对应代码中的这部分...内容]的每一个值提取相应的数据），主要代码如下图红框所示（最后括号未被包含）： 最后，用大括号将提取的数据包裹起来，成为构造table的最终数据即可。...大海：对的，其中需要对《跨查询引用》和《根据内容定位》的知识需要理解得比较透，所以为什么我在前期关于“理解PQ里的数据结构”部分反复强调其重要性。 小勤：嗯。借这个案例我也可以再加深一下理解。
: 这个类用于修改列的顺序，其主要参数如下： positions：字典，传入列名->新的列下标键值对 下面是举例演示： 修改列位置 # 将budget从第0列挪动为第3列 pdp.ColReorder...可以是新的列也可以是一个聚合值），即这时函数真正传入的最小计算对象是列，主要参数如下： columns：str或list，用于指定对哪些列进行计算 func：传入需要计算的函数 drop：bool型，决定是否在计算完成后把旧列删除...，决定是否在计算完成后把旧列删除，默认为True，即对应列的计算结果直接替换掉对应的旧列 下面我们以计算电影盈利率小于0，大于0小于100%以及大于100%作为三个分箱区间，首先我们用到上文介绍过的RowDrop...，默认为None，即对全部类别型变量进行哑变量处理 dummy_na：bool型，决定是否将缺失值也作为哑变量的一个类别进行输出，默认为False即忽略缺失值 exclude_columns：list，...，下文只介绍其中我认为最有用的： RegexReplace: 这个类用于对文本型列进行基于正则表达式的内容替换，其主要参数如下： columns：str型或list型，传入要进行替换的单个或多个列名
在实际应用中，是一种比较单个（或多个）变量多个版本的方法，通常是通过测试受试者对多个版本的反应，并确定多个版本中的哪个更有效。...条件Layer：是一种更加精细的流量控制方式，表示某一流量的某个或者某几个参数在满足一定条件下才会进行实验。...因此，我们设计了如下的回滚模型： 首先在配置发布时，会将所有修改的表名、列名、列类型、列新旧值、修改类型存入表中。...回滚时获取上次发布的所有修改的表名、列名、列类型、列新旧值、修改类型，反向操作数据库，达到回滚的目的。 ?...平台将数据中的实验路径同其他用于过滤的字段一同作为维度，结合时间戳和指标字段，完成指定标签的广告效果指标计算。 五.
现在，您的 DataFrame 按城市条件下测量的平均 MPG 降序排序。MPG 值最高的车辆在第一排。...下一个示例将解释如何指定排序顺序以及为什么注意您使用的列名列表很重要。 按升序按多列排序 要在多个列上对 DataFrame 进行排序，您必须提供一个列名称列表。...如果有两个或更多相同的品牌，则按 排序model。在列表中指定列名的顺序对应于 DataFrame 的排序方式。 更改列排序顺序 由于您使用多列进行排序，因此您可以指定列的排序顺序。...对于文本数据，排序区分大小写，这意味着大写文本将首先按升序出现，最后按降序出现。 按具有不同排序顺序的多列排序 您可能想知道是否可以使用多个列进行排序并让这些列使用不同的ascending参数。...您的 DataFrame 通常不会将NaN值作为其索引的一部分，因此此参数在.sort_index().
数据库基础 基本概念 ---- 数据库（DB） 将大量数据保存起来，经加工可进行高效访问的数据集合 数据库管理系统（DBMS） 用来管理数据库的计算机系统 ---- 字段：表中的列...● 多行注释 书写在“/*”和“*/”之间，可以跨多行。...---- DBMS分类 层次数据库（HDB） 将数据通过层次结构（树状结构）表示出来 关系数据库（RDB） 采用行和列组成的二维表格存储数据，用SQL对数据进行操作 常见的RDB：Oracle...只能用半角英文字母、数字、下划线（_）作为数据库、表和列的名称，必须以英文字母开头。...() 可以提高优先级 真值 众所周知，真值有true和false两种，但是在SQL中还有一种UNKNOWN的情况。前者是二值逻辑，后者是三值逻辑。 在值为NULL时，真值为UNKNOWN
（一条记录）： INSERT INTO 表名 VALUES(值1, 值2, 值3) 如果插入的数据与列一一对应，那么可以省略列名，但是如果希望向指定列上插入数据，就需要给出列名： INSERT INTO...也可以同时添加多个排序： SELECT * FROM 表名 WHERE 条件 ORDER BY 列名1 ASC|DESC, 列名2 ASC|DESC 这样会先按照列名1的值进行排序，每组列名1相同的数据再按照列名...； SUM([DISTINCT]列名)求一列的和（注意必须是数字类型的）； SUM([DISTINCT]列名)求一列的平均值（注意必须是数字类型）； MAX([DISTINCT]列名)求一列的最大值；...MIN([DISTINCT]列名)求一列的最小值； 一般用法： SELECT COUNT(DISTINCT 列名) FROM 表名 WHERE 条件 例如： 在 MySQL 中，通过 SC 表计算“2...将表本身和表进行笛卡尔积计算，得到结果，但是由于表名相同，因此要先起一个别名： SELECT * FROM 表名 别名1, 表名 别名2 ---- 嵌套查询 ---- 将查询的结果作为另一个查询的条件，
指定列排序 可以指定要排序的单个列，也可以指定多个列作为逗号分隔的列表。 排序由第一个列出的列完成，然后在该列中由第二个列出的列完成，以此类推。 列可以通过列名、列别名或列号指定。...在某些情况下，对列名进行操作的表达式可以用作排序项。 不能使用将列名作为字符串提供的变量或其他表达式。...即使RowID是私有的并且没有在选择项列表中列出，也可以按RowID值排序。 应该指定%ID伪列名作为ordering-item，而不是实际的RowID字段名。...但是，%PLUS排序函数将所有非数字字符视为0。 因此，要正确地以数字序列对混合数字字符串进行排序，需要多个排序项。 例如，在Sample中。...多个逗号分隔的ORDER BY值指定排序操作的层次结构，如下面的示例所示: SELECT A,B,C,M,E,X,J FROM LetterTable ORDER BY 3,7 DESC,1 ASC 本例将
"目标值列名").count() # 此时返回结果 列数不变,目标值列名列为所有的目标值,其他列不再是值,而是分组后该组的个数 # tf = group[group['非目标值列列名...']>n].reset_index() # data = data[data[目标列列名].isin(tf.目标列列名)] # 取出目标值 y =data["目标列"]...(多个条件下 x的概率) 朴素贝叶斯-贝叶斯公式 机器学习常用算法 k近邻算法 求出未知点 与周围最近的 k个点的距离 查看这k个点中大多数是哪一类 根号((x已知-x未知)^2+(y已知...# 此时返回结果 列数不变,目标值列名列为所有的目标值,其他列不再是值,而是分组后该组的个数 # tf = group[group['非目标值列列名']>n].reset_index()...(多个条件下 x的概率) 朴素贝叶斯-贝叶斯公式 ===================================== 个人体会:例 有两个箱子 A:两黑,两白球 B两黑球,1白球 随机从两个盒子中拿出一个球
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
腾讯会议
对象存储
云直播
