首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

Pandas 查找,丢弃列值唯一的列

前言 数据清洗很重要,本文演示如何使用 Python Pandas 来查找和丢弃 DataFrame 中列值唯一的列,简言之,就是某列的数值除空值外,全都是一样的,比如:全0,全1,或者全部都是一样的字符串如...:已支付,已支付,已支付… 这些列大多形同虚设,所以当数据集列很多而导致人眼难以查找时,这个方法尤为好用。...上代码前先上个坑吧,数据列中的空值 NaN 也会被 Pandas 认为是一种 “ 值 ”,如下图: 所以只要把列的缺失值先丢弃,再统计该列的唯一值的个数即可。...代码实现 数据读入 检测列值唯一的所有列并丢弃 最后总结一下,Pandas 在数据清洗方面有非常多实用的操作,很多时候我们想不到只是因为没有接触过类似的案例或者不知道怎么转换语言描述,比如 “...列值唯一 ” --> “ 除了空值以外的唯一值的个数等于1 ” ,许多坑笔者都已经踩过了,欢迎查看我的其余文章,提建议,共同进步。

5.7K21

问与答127:如何列出并统计列表中的唯一值?

Q:在一列中包含有很多数据,我想使用公式来列出并统计其唯一值,我不想使用数据透视表,下图1所示为示例数据。 ? 图1 使用公式,在列C中列出其唯一值,列D中列出这些值相应出现的数量。...),0) 其中,使用: COUNTIF(C1:C1,A2:A25) 计算第二个区域A2:A25中,每个单元格中的值在第一个区域中出现的次数,要么是1(表明出现了),要么是0(表明没有出现,即没有这个值)...,而这正是我们查找的唯一值。...在单元格D2中输入公式: =COUNTIF(A2:A25,C2) 统计获取的唯一值在原列表中出现的次数,如下图3所示。 ? 图3 最后,向下复制公式得到最终结果,如下图4所示。 ?...图4 对于上图2中的数组公式,当向下复制时,如果唯一值获取完了,会出现#N/A错误,对于Excel 2007及以上版本,可以使用下面的数组公式: =IFERROR(INDEX(A2:A25,MATCH(

7.6K30
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    删除列中的 NULL 值

    图 2 输出的结果 先来分析图 1 是怎么变成图 2,图1 中的 tag1、tag2、tag3 三个字段都存在 NULL 值,且NULL值无处不在,而图2 里面的NULL只出现在这几个字段的末尾。...这个就类似于 Excel 里面的操作,把 NULL 所在的单元格删了,下方的单元格往上移,如果下方单元格的值仍是 NULL,则继续往下找,直到找到了非 NULL 值来补全这个单元格的内容。...有一个思路:把每一列去掉 NULL 后单独拎出来作为一张独立的表,这个表只有两个字段,一个是序号,另一个是去 NULL 后的值。...一个比较灵活的做法是对原表的数据做列转行,最后再通过行转列实现图2 的输出。具体的实现看下面的 SQL(我偷懒了,直接把原数据通过 SELECT 子句生成了)。...,按值在原表的列出现的顺序设置了序号,目的是维持同一列中的值的相对顺序不变。

    9.9K30

    Excel查找值技巧,根据两个值来查找相对应的值

    如下图1所示,要根据代码和编号两个值来查找对应的数量。 图1 有三种解决方案来实现目的: 1.连接关键值。此时,可以使用辅助列,也可以使用数组公式。 2.SUMIFS函数。...此时,返回的值必须是数字。 3.OFFSET函数。此时,如示例中的代码列排好序才能实现。...在最终的工作表中,你可以隐藏辅助列,看起来可能会更好。 如果你了解数组公式,可以不借助辅助列。...,然后使用查找函数来查找相对应的值。...将上述两个返回值作为OFFSET函数的参数,返回要查找的单元格区域,作为VLOOKUP函数的参数,最后返回相对应的值。 当然,这样的公式也需要数值排序如示例一样。

    2.8K40

    Excel公式练习58: 获取与查找值相对应的多个值

    导语:本文所讲的案例在第一季公式练习中有相似的例子,这里再巩固一下。只要知道要在公式中使用的函数,没有Excel解决不了的问题!...本次的练习是:如下图1所示,单元格区域A1:B7中存放着数据,要求使用公式查找单元格D2中的分类对应的名称。例如,单元格D2中是“水果”,则从列B中获取是水果的名称并放置在列E中。 ?...公式解析 公式中的: COUNTIF(A:A,$D$2)<ROWS($E$2:E2) 用来计算符合条件的结果数,并与已放置值的单元格数(已返回的值)相比较,以确定在单元格中输入的值。...FALSE;6;FALSE},ROW(A1))) 转换为: INDEX(B:B,SMALL({2;3;FALSE;FALSE;6;FALSE},1)) 转换为: INDEX(B:B,2) 得到单元格B2中的值...: 苹果 当向下拖拉时,ROW(A1)将更新为ROW(A2)、ROW(A3)……,得到值2、3……等,从而可以获取相应位置的值。

    2.8K40

    php 数组根据值找key,从数组查找key对应的值 – key

    datetimeDEFAULTNULL,PRIMARYKEY… php$arr = [5=>’name’,8=>’age’,10=>’city’]; $num = ‘5,10’; $str = ”; //如何查找5,10对应的值...=value; } } 回复内容: php$arr = [5=>’name’,8=>’age’,10=>’city’]; $num = ‘5,10’; $str = ”; //如何查找5,10对应的值,...除了楼上给出的分解num后通过array_key_exists在arr数组寻找相应的值后在implode到一起之外。...exists(key):确认一个key是否存在del(key):删除一个keytype(key):返回值的类型keys(pattern):返回满足给定pattern的所有keyrandomkey:随机…...检查是否还再链接,[+pong] $redis->ttl(‘key’);//查看失效时间[-1 | timestamps] $redis->persist(‘key’);//移除失效时间[ 1 | 0 …,不会被其他命令插入

    11.6K20

    Python字典提取_python字典键对应的值

    3、删除字典中的一项 4、遍历字典 5、字典遍历的key\value 6、字典的标准操作符 7、判断一个键是否在字典中 8、python中其他的一些字典方法...(详解) ** 方案一 #encoding=utf-8 print ('中国') #字典的一键多值 print('方案一 list作为dict的值 值允许重复' ) d1={} key=1 value...d1.get(key,[]) ) 方案一输出结果 中国 方案一 list作为dict的值 值允许重复 {1: [2, 2]} 方案一 获取值 [2, 2] 方案一 删除值,会留下一个空列表 {1: []...} 方案一 检查是否还有一个值 [] 方案二 print ('方案二 使用子字典作为dict的值 值不允许重复') d1={} key=1 keyin=2 value=11 d1.setdefault(...(d1.get(key,()) ) 输出结果: 方案三 使用set作为dict的值 值不允许重复 {1: {2, 3}} 方案三 获取值 [2, 3] 方案三 删除值,会留下一个空列表 {1: set

    3.6K30

    VBA中的高级筛选技巧:获取唯一值

    在VBA中,AdvancedFilter方法是处理这种情形的非常强大的一个工具。该方法可以保留原数据,采用基于工作表的条件,可以找到唯一值。下面,将详细介绍如何获取并将唯一值放置在单独的地方。...如果数据没有标题,即第一个单元格是常规值,则第一个值可能会在唯一值列表中出现两次。 通常,我们只是在一列中查找唯一值。...例如,如果在列B中查找唯一值,则代码如下: Range("B:B").AdvancedFilter 或者: Columns(3).AdvancedFilter 注意,单元格区域可以是Columns集合中的单个列...AdvancedFilter方法可以对多个列进行操作,如果只想筛选数据的子集,则可以限制其行范围。 可以跨列筛选唯一值。...这意味着无法限制输出,因此要选择一个没有值或可以覆盖原有值的列。

    8.6K10
    领券