首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

【Python】基于某些列删除数据框中的重复值

默认值False,即把原数据copy一份,在copy数据上删除重复值,并返回新数据框(原数据框不改变)。值为True时直接在原数据视图上删重,没有返回值。...从结果知,参数为默认值时,是在原数据的copy上删除数据,保留重复数据第一条并返回新数据框。 感兴趣的可以打印name数据框,删重操作不影响name的值。...从结果知,参数keep=False,是把原数据copy一份,在copy数据框中删除全部重复数据,并返回新数据框,不影响原始数据框name。...原始数据中只有第二行和最后一行存在重复,默认保留第一条,故删除最后一条得到新数据框。 想要根据更多列数去重,可以在subset中添加列。...但是对于两列中元素顺序相反的数据框去重,drop_duplicates函数无能为力。 如需处理这种类型的数据去重问题,参见本公众号中的文章【Python】基于多列组合删除数据框中的重复值。 -end-

20.5K31

Excel实战技巧67:在组合框中添加不重复值(使用ADO技巧)

很多情况下,我们需要使用工作表中的数据来填充组合框,但往往这些数据中含有许多重复值。如何去除重复值并得到唯一值,这是一个永恒的话题,大家也会用到各式各样的方法得到结果。...本文讲解一种技巧,使用Recordset(记录集)来获取唯一值并将其填充到组合框中。 示例数据如下图1所示。在工作表中有一个组合框,需要包含列A中的省份列表,但是列A中有很多重复的省份数据。 ?...单击功能区“开发工具”选项卡中“插入”按钮下ActiveX控件中的“组合框”,在工作表中插入一个组合框,可以看到Excel将其自动命名为“ComboBox1”,如下图2所示。 ?...可以在任何事件或过程中调用它们,例如工作簿打开事件、查询刷新事件或者按下按钮后。 运行或调用过程后,在工作表中单击组合框右侧下拉按钮,结果如下图3所示。 ?...图3 说明 1.示例中使用的是ActiveX组合框控件,如下图2所示。 2.需要在VBE中设置对Microsoft ActiveX Data Objects Library的引用,如下图4所示。

5.7K10
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    【Python】基于多列组合删除数据框中的重复值

    在准备关系数据时需要根据两列组合删除数据框中的重复值,两列中元素的顺序可能是相反的。 我们知道Python按照某些列去重,可用drop_duplicates函数轻松处理。...本文介绍一句语句解决多列组合删除数据框中重复值的问题。 一、举一个小例子 在Python中有一个包含3列的数据框,希望根据列name1和name2组合(在两行中顺序不一样)消除重复项。...二、基于两列删除数据框中的重复值 1 加载数据 # coding: utf-8 import os #导入设置路径的库 import pandas as pd #导入数据处理的库...import numpy as np #导入数据处理的库 os.chdir('F:/微信公众号/Python/26.基于多列组合删除数据框中的重复值') #把路径改为数据存放的路径 df =...三、把代码推广到多列 解决多列组合删除数据框中重复值的问题,只要把代码中取两列的代码变成多列即可。

    14.7K30

    如何使用Excel将某几列有值的标题显示到新列中

    如果我们有好几列有内容,而我们希望在新列中将有内容的列的标题显示出来,那么我们怎么做呢? Excel - TEXTJOIN function 1....- - - - 4 - - - 在开始,我们曾经使用INDEX + MATCH的方式,但是没有成功,一直是N/A https://superuser.com/questions/1300246/if-cell-contains-value-then-column-header...所以我们后来改为TEXTJOIN函数,他可以显示值,也可以显示值的标题,还可以多个列有值的时候同时显示。...- - 4 - - - 15 Year 5 - - - - 5 - - - =TEXTJOIN(", ",TRUE,IF(ISNUMBER(B2:I2),$B$1:$I$1,"")) 如果是想要显示值,...则: =TEXTJOIN(", ",TRUE,IF(ISNUMBER(B2:I2),B2:I2,"")) 其中,ISNUMBER(B2:I2)是判断值是不是数字,可以根据情况改成是不是空白ISBLANK

    11.3K40

    Excel公式技巧16: 使用VLOOKUP函数在多个工作表中查找相匹配的值(1)

    在某个工作表单元格区域中查找值时,我们通常都会使用VLOOKUP函数。但是,如果在多个工作表中查找值并返回第一个相匹配的值时,可以使用VLOOKUP函数吗?本文将讲解这个技术。...最简单的解决方案是在每个相关的工作表中使用辅助列,即首先将相关的单元格值连接并放置在辅助列中。然而,有时候我们可能不能在工作表中使用辅助列,特别是要求在被查找的表左侧插入列时。...图3:工作表Sheet3 示例要求从这3个工作表中从左至右查找,返回Colour列中为“Red”对应的Amount列中的值,如下图4所示。 ?...B1:D10"),3,0) 其中,Sheets是定义的名称: 名称:Sheets 引用位置:={"Sheet1","Sheet2","Sheet3"} 在公式中使用的VLOOKUP函数与平常并没有什么不同...} 分别代表工作表Sheet1、Sheet2、Sheet3的列B中“Red”的数量。

    25.5K21

    Excel公式技巧17: 使用VLOOKUP函数在多个工作表中查找相匹配的值(2)

    我们给出了基于在多个工作表给定列中匹配单个条件来返回值的解决方案。本文使用与之相同的示例,但是将匹配多个条件,并提供两个解决方案:一个是使用辅助列,另一个不使用辅助列。 下面是3个示例工作表: ?...图3:工作表Sheet3 示例要求从这3个工作表中从左至右查找,返回Colour列中为“Red”且“Year”列为“2012”对应的Amount列中的值,如下图4所示的第7行和第11行。 ?...图4:主工作表Master 解决方案1:使用辅助列 可以适当修改上篇文章中给出的公式,使其可以处理这里的情形。首先在每个工作表数据区域的左侧插入一个辅助列,该列中的数据为连接要查找的两个列中数据。...VLOOKUP函数在多个工作表中查找相匹配的值(1)》。...解决方案2:不使用辅助列 首先定义两个名称。注意,在定义名称时,将活动单元格放置在工作表Master的第11行。

    14.1K10

    完全理解不了Vlookup,怎么破?

    为什么要学习vlookup? 当有多张表时,如何将一个excel表格的数据匹配到另一个表中?这时候就需要使用vlookup函数。它可以按条件查找出数据。...3)最后,在插入函数对话框中搜索函数中输入vlookup,然后点击转到,就可以找到这个函数。 image.png 点击“确定”就会跳出参数设置的对话框。...前面我们聊了什么是vlookup,以及如何使用。现在我们继续聊聊: 如何使用vlookup查找重复值? 如何使用vlookup进行数据分组?...第1步,我们可以添加一个辅助列,将姓名和学号联合起来作为为非重复的唯一字段。在学号前面插入一列,并命名为“辅助列”。...在进行VLOOKUP函数进行数据的匹配查找时,因为我们要把第2个参数在哪里找里的值全部选中,然后按F4按钮将相对引用变成绝对引用。也就是在列号和行号前面加了符号美元符号$。

    1.8K11

    VLOOKUP 到底有多重要?

    为什么要学习vlookup? 当有多张表时,如何将一个excel表格的数据匹配到另一个表中?这时候就需要使用vlookup函数。它可以按条件查找出数据。...3)最后,在插入函数对话框中搜索函数中输入vlookup,然后点击转到,就可以找到这个函数。 image.png 点击“确定”就会跳出参数设置的对话框。...前面我们聊了什么是vlookup,以及如何使用。现在我们继续聊聊: 如何使用vlookup查找重复值? 如何使用vlookup进行数据分组?...第1步,我们可以添加一个辅助列,将姓名和学号联合起来作为为非重复的唯一字段。在学号前面插入一列,并命名为“辅助列”。...在进行VLOOKUP函数进行数据的匹配查找时,因为我们要把第2个参数在哪里找里的值全部选中,然后按F4按钮将相对引用变成绝对引用。也就是在列号和行号前面加了符号美元符号$。

    1.9K2625

    VLOOKUP 到底有多重要?

    为什么要学习vlookup? 当有多张表时,如何将一个excel表格的数据匹配到另一个表中?这时候就需要使用vlookup函数。它可以按条件查找出数据。...3)最后,在插入函数对话框中搜索函数中输入vlookup,然后点击转到,就可以找到这个函数。 点击“确定”就会跳出参数设置的对话框。...前面我们聊了什么是vlookup,以及如何使用。现在我们继续聊聊: 如何使用vlookup查找重复值? 如何使用vlookup进行数据分组? 如何使用vlookup查找重复值?...第1步,我们可以添加一个辅助列,将姓名和学号联合起来作为为非重复的唯一字段。在学号前面插入一列,并命名为“辅助列”。...在第2行单元格中输入公式:=C2&B2,这里&是将两个单元格的内容拼接在一起。 第2步,用辅助列作为vlookup的查找条件,就可以查找出来了。 如何使用vlookup进行数据分组?

    1.7K10

    Python操控Excel:使用Python在主文件中添加其他工作簿中的数据

    标签:Python与Excel,合并工作簿 本文介绍使用Python向Excel主文件添加新数据的最佳方法。该方法可以保存主数据格式和文件中的所有内容。...图2 可以看出: 1.主文件包含两个工作表,都含有数据。 2.每个工作表都有其格式。 3.想要在每个工作表的最后一行下面的空行开始添加数据。如图2所示,在“湖北”工作表中,是在第5行开始添加新数据。...图3 接下来,要解决如何将新数据放置在想要的位置。 这里,要将新数据放置在紧邻工作表最后一行的下一行,例如上图2中的第5行。那么,我们在Excel中是如何找到最后一个数据行的呢?...图4 打开并读取新数据文件 打开新数据文件,从中获取所有非空的行和列中的数据。使用.expand()方法扩展单元格区域选择。注意,从单元格A2开始扩展,因为第1列为标题行。...图6 将数据转到主文件 下面的代码将新数据工作簿中的数据转移到主文件工作簿中: 图7 上述代码运行后,主文件如下图8所示。 图8 可以看到,添加了新数据,但格式不一致。

    7.9K20

    Excel图表学习75:创建那时 Vs. 现在的交互式图表

    图3 3.获取所选区域的数据 现在,组合框可用来选择要在图表中显示的区域,接下来是获取所选区域的数据。可以使用VLOOKUP或INDEX公式来执行此操作。...使用VLOOKUP公式 假设区域的名字在单元格C34,数据在表data中,则: =VLOOKUP(C34,data,2,false) 获取表中第2列的值。...使用INDEX公式 假设代表区域的数字在单元格C33,数据在表data中,则: =INDEX(data[那时],C33) 4.创建显示那时到现在的移动的图表 创建一个图表,显示一条从那时的值到现在的值的线条...在工作表中,创建如下图4所示的数据表。 图4 然后,选择上图4中的数据,创建散点图,选择带直线的散点图。 5.格式化图表 我们想在那时的值的开头显示一个粗圆圈,在现在的值的末尾显示箭头。...7.将所有的放在一起 将组合框、散点图、条形图放在一起并调整到合适的位置。在其外围添加一个框形,以便看起来像一份报告。 然后在图表顶部添加一个动态标题。 至此,整份图表完成,如下图8所示。

    3.3K30

    手把手教你做一个“渣”数据师,用Python代替老情人Excel

    3、导入表格 默认情况下,文件中的第一个工作表将按原样导入到数据框中。 使用sheet_name参数,可以明确要导入的工作表。文件中的第一个表默认值为0。...4、使用工作表中的列作为索引 除非明确提到,否则索引列会添加到DataFrame中,默认情况下从0开始。...使用index_col参数可以操作数据框中的索引列,如果将值0设置为none,它将使用第一列作为index。 ?...五、数据计算 1、计算某一特定列的值 输出结果是一个系列。称为单列数据透视表: ? 2、计数 统计每列或每行的非NA单元格的数量: ? 3、求和 按行或列求和数据: ? 为每行添加总列: ?...可以使用dictionary函数进行单独计算,也可以多次计算值: ? 七、Vlookup函数 Excel中的vlookup是一个神奇的功能,是每个人在学习如何求和之前就想要学习的。

    8.4K30

    Excel将两个表格关联数据

    Excel将两个表格关联数据合并 有时候我们需要将两个数据表,合并成为一张数据表,根据两张表中,有一个相同定义的列进行合并。...数据表1 数据表2 两种表格中都有序列化id这个列,此时,需要把表2中的价格列,根据序列号id,添加到表1中。...首先,在表1中,后面的列添加标题。 然后,将鼠标定位到数据列的第一列,选择公式菜单,选择插入函数选项。...弹出插入函数对话框,输入VLOOKUP,然后,转到选择VLOOKUP函数,确定即可。 第一列选择,数据表2中对应列的第一条数据。...当出现一对多的关系时,就是数据表1中的某个列,在数据表2中有多个对应值,那么,在数据表1中,该列后面的值,将取数据表2中的最后一个匹配关系后面相应的数据,会把前面的覆盖掉。

    5.1K20

    认识数据框

    背景 数据框是一种表格式的数据结构,属于一种二维表,分为行和列。数据框旨在模拟数据集,与其他统计软件例如 SAS 或者 SPSS 中的数据集的概念一致。...数据集通常是由数据构成的一个矩形数组,行表示观测,列表示变量。不同的行业对于数据集的行和列叫法不同。...在一个数据框中,每一行的元素个数相同,每一列元素个数也相同,每一列的数据类型一致,都为一个向量,每一行内容还是一个数据框。数据框是 R 中使用最广泛的一种数据格式。...逻辑值 #数据框 索引 colnames(x) x$City x$Income x$Province #练习 x<- read.csv('homo_length.csv') class(x) x Vlookup 功能 dta <- genes200[gene93,] dta #数据中包含没有检索到的 gene ID,返回值为 NA,利用 na.omit 删除包含 NA 的行

    69620

    在阴影中:Vawtrak(银行木马病毒)意图通过添加新的数据源使得自己更加隐蔽

    在最新的版本中,Vawtrak仍然使用由伪随机树生成器(PRNG)提供的线性同余生成器(LCG)来生产用于加密数据的密钥;但是,现在使用的PRNG功能发送了改变: def prng ( seed ) :...并且在凭证的泄露过程中使用了相同的编码方法。 [图 5] 根据所使用的内容,LZMAT(开源极快数据压缩库)有时用于压缩在加密之前已泄露的数据。...为了解码配置文件,Vawtrak首先使用与解码可疑字符串完全相同的解码方法。接下来,使用LZMAT解压配置文件。在解压之后,配置中包含了一个二进制数据结构,该二进制数据结构包含若干其他编码的配置段。...存储配置: 除了在收到配置后立即解码配置,Vawtrak还在添加额外的编码层后将编码配置存储在注册表中。...下一步,使用添加LCG算法进一步编码整个编码配置文件。然后使用编码密钥将该值存储在注册表中。

    2.5K30

    VLOOKUP很难理解?或许你就差这一个神器

    VLOOKUP查找函数 INDEX索引查找函数 开发工具-数值控制钮应用 Excel自动填充颜色 数据验证-下拉选项框应用 ---- 制图准备 为方便演示,先将制图所需的文字准备好,并勾选网格线,让背景更加清晰...参数名称 说明 lookup_value (必需)要查找的值。要查找的值必须列于在 table_array 参数中指定的单元格区域的第一列中。...可以关注公众号并回复【VLOOKUP动态图解】获取文件。 ? 利用数据验证设置下拉选项 除了使用数值控制钮选择目标查找值,还可以通过设置下拉选框选择目标查找值。...以区号为例,在【数据】--【数据验证】下【数据验证】--【设置】中【允许值】为序列,来源是区号所在区域I14:I19,确定即可。 在运用VLOOKUP函数,查找区号所对应的省份。...VLOOKUP进行数据查找,查找值必须在查找区域的第一列,如果查找值不在查找区域的第一列,遇到这种问题时,但靠VLOOKUP函数并不能查找出所需要的数据。此时可以通过 INDEX+MATCH函数。

    8.1K60

    VLOOKUP 函数使用手册: 要注意查找的格式与 lookup_value 的格式要一致

    当vlookup函数第一参数省略查找值时,表示用0查找。 Table_array为需要在其中查找数据的数据表。使用对区域或区域名称的引用。...col****_index_num为table_array 中查找数据的数据列序号。...B)在使用参照地址时,有时需要将lookup_value的值固定在一个格子内,而又要使用下拉方式(或复制)将函数添加到新的单元格中去,这里就要用到 ‘’$‘’这个符号了,这是一个起固定作用的符号,比如说我始终想以...4.在使用该函数时,lookup_value的值必须在table_array中处于第一列。 二.VLOOKUP的错误值处理。...1,2,3,0)) 在Excel 2007以上版本中,以上公式等价于 =IFERROR(vlookup(1,2,3,0),0) 这句话的意思是:如果VLOOKUP函数返回的值是个错误值的话(找不到数据)

    4.3K30

    第二阶段的常用函数

    开启新的阶段。第二阶段评为难度最易是因为他们与Excel的函数基本一样,如果你会用Excel中的If和Vlookup,这些就算不上新的知识,然而这最简单的往往也是最好用的。 ?...例如下面这个形式,无论是在度量值还是在列中,经常会用到。 ?...Related这个函数与Excel中的Vlookup功能相似。在咖啡数据表中,如果我们想添加一列获取杯型表中对应的体积值,只需要关联你想要的输出的体积列。是不是很简单! ?...假定我们有一张按照咖啡种类和杯型定价的价格表,想在数据表中添加一列来得到对应的价格信息。...你可以先脑补一下我们在Excel中一般会想到=Vlookup([咖啡种类],’价格表’列1:列3,3,)来求对应咖啡种类的价格,但是如果还要加一个杯型条件就有点麻烦了,可能要用&连接两个字段或者使用Index

    1.1K10

    升值加薪Excel神助攻,数据透视表堪称神器!

    VLOOKUP、数据透视表、条件格式…你用这几个技巧做,80%的工作需求都能解决。今天特意整理了这些操作技巧,拯救同在“表海”中挣扎的你,让你的工作效率超乎想象。 ?...因此要用VLOOKUP函数查找引用数据,这也是Excel中使用最频繁的操作。 VLOOKUP函数结构 ? VLOOKUP精确匹配 ?...Index+Match中,Match用以确定数据所在的行值和列值(查找姓名所在的行,查找身份证号所在的列,行列交汇的数据就是要匹配出来的数据),Index负责调出由Match确定的行值和列值交叉位置确定的唯一数据...(3)设置折线图的标记点显示方式 ①设置折线图,线条填充样式为:无线条 ②设置标记点:数据标记选项为原型,大小为35 填充颜色为:白色 标记表框为蓝色:5磅,线条类型为粗细结合式 ?...点击选中次坐标,在设置坐标轴格式中,更改坐标轴的最大值为1,即100%;点击环形图的数据点以后,单击鼠标右键,选:添加数据标签;选中数据标签后,在设置数据标签格式中,更改标签位置为:居中。 ?

    2.2K20
    领券