首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    利用pandas的函数,直接生成一列数据,每项数据是有 省-市-区构成,比如 1-2-2

    一、前言 国庆期间在Python白银交流群【空翼】问了一个pandas网络处理的问题,提问截图如下: 二、实现过程 这里【论草莓如何成为冻干莓】指出,使用向量化操作。...import pandas as pd df = pd.read_excel('test.xlsx') # 方法一,直接构造 df['标记'] = df.省.astype('str') + '-' +...df.市.astype('str') + '-' + df.区.astype('str') # 方法二,使用合并函数实现 df['new'] = df["省"].map(str).str.cat([df...print(df) 代码运行之后,可以得到如下结果: 可以满足粉丝的要求! 后来【甯同学】也给了一个示例代码,如下所示,也是可以得到预期结果的: 三、总结 大家好,我是皮皮。...这篇文章主要盘点了一个Pandas处理的问题,文中针对该问题,给出了具体的解析和代码实现,帮助粉丝顺利解决了问题。

    36120

    盘点一个Pandas多列分组问题

    一、前言 前几天在Python白银交流群【在途中要勤奋的熏肉肉】问了一道Pandas处理的问题,如下图所示。...原始数据如下图所示: 下面是她自己写的代码: # df['name'] = df['name'].str.lower() test['pid'] = test['pid'].astype(int) test...['arr0'] = test['arr0'].astype(str) test['arr1'] = test['arr1'].astype(str) test['arr2'] = test['arr2...(str) data.groupby('pid')[arr0_3].agg(lambda x: x.drop_duplicates().str.cat(sep='-')) 运行之后,结果如下图所示:...顺利地解决了粉丝的问题。 三、总结 大家好,我是皮皮。这篇文章主要盘点了一道使用Pandas处理数据的问题,文中针对该问题给出了具体的解析和代码实现,帮助粉丝顺利解决了问题。

    1.2K10

    数据类型合理选择有效减少内存占用

    在用Pandas进行数据分析时,首先对读取的数据清洗操作包括剔除空列、去除不合要求的表头、设置列名等,而经常忽略对数据列设置相应的数据类型,而数据类型设置对大数据集内存占用产生重要影响。...1、优化数据类型减少内存占用 一般来说pandas 它会自动推断出数据类型,如果数值型列数据包括了缺失值,推断数据类型就会自动填充为浮点型。推断的数据类型并不一定是最优,有时候会产生意想不到的结果。...通常情况下,Pandas对读取的数据列默认是设置为object数据类型,这种通用类型因自身的兼容性会导致所读取的数据占据较大的内存空间,倘若能给它们设置合适的数据类型,就可以降低该数据集的实际内存占用,...pandas、python 和 numpy 之间类型总结 Pandas dtype Python type NumPy type Usage object str or mixed string_, unicode...(i, str) for i in unique_data): x = x.astype('string') return x return

    1.7K10

    Pandas 2.2 中文官方教程和指南(十七)

    pandas 会缓存此结果,因此在相同的索引上重新检查非常快。 Index.duplicated()将返回一个布尔数组,指示标签是否重复。...重复标签的后果 一些 pandas 方法(例如Series.reindex())在存在重复时无法正常工作。输出结果无法确定,因此 pandas 会报错。...导致非分类 dtype 的合并可能会导致更高的内存使用量。使用.astype或union_categoricals来确保category结果。...导致非分类类型的合并可能会导致更高的内存使用量。使用.astype或union_categoricals来确保category类型的结果。...导致非分类数据类型的合并可能会导致更高的内存使用量。使用.astype或union_categoricals来确保获得category结果。

    46810

    【硬核干货】Pandas模块中的数据类型转换

    我们在整理数据的时候,经常会碰上数据类型出错的情况,今天小编就来分享一下在Pandas模块当中的数据类型转换的相关技巧,干货满满的哦!...导入数据集和模块 那么我们第一步惯例就是导入Pandas模块以及创建数据集了,代码如下 import pandas as pd import numpy as np df = pd.DataFrame...,因此第一步我们要做的则是将这些货币符号给替换掉,然后再进行数据类型的转换,代码如下 df['money_replace'] = df['money_col'].str.replace('£', '')...()方法了,出来的结果与上述的一样,代码如下 df['date'].astype('datetime64') 而当我们遇到自定义格式的日期格式的数据时,同样也是调用to_datetime()方法,但是需要设置的格式也就是...datetime64', 'string_col': 'int32', 'float_col': 'int64', 'value': 'float32', }) 我们来看一下出来的结果

    1.6K30

    Python科学计算:Pandas

    格式问题 更改数据格式 这是个比较常用的操作,因为很多时候数据格式不规范,我们可以使用astype函数来规范数据格式,比如我们把Chinese字段的值改成str类型,或者int64可以这么写: df2[...'Chinese'].astype('str') df2['Chinese'].astype(np.int64) 123 df2['Chinese'].astype('str') df2['Chinese...'].astype(np.int64) 数据间的空格 有时候我们先把格式转成了str类型,是为了方便对数据进行操作,这时想要删除数据间的空格,我们就可以使用strip函数: #删除左右两边空格 df2...argument_list是参数列表,expression是关于参数的表达式,会根据expression表达式计算结果进行输出返回。...sql,返回的结果是sqldf对sql的运行结果,当然sqldf中也输入了globals全局参数,因为在sql中有对全局参数df1的使用。

    2K10

    对比python字符串函数,轻松学习pandas的 str 矢量化字符串函数

    我们不仅要学会怎么处理单个字符串,这个就需要学习“python字符串函数”,我们还要学会怎么处理二维表格中每一列每一格的字符串,这个就需要学习“pandas的str矢量化字符串函数”。...④ count:计算给定字符在字符串中出现的次数 df["电话号码"].str.count("3") 结果如下: ?...⑤ get:获取指定位置的字符串 df["姓名"].str.get(-1) df["身高"].str.split(":") df["身高"].str.split(":").str.get(0) 结果如下...⑩ slice_replace:使用给定的字符串,替换指定的位置的字符 df["电话号码"].str.slice_replace(4,8,"*"*4) 结果如下: ?...⑪ replace:将指定位置的字符,替换为给定的字符串 df["身高"].str.replace(":","-") 结果如下: ?

    1.3K10

    pandas 分类数据处理大全(附代码)

    继续更新pandas数据清洗,历史文章: pandas 文本处理大全(附代码) pandas 缺失数据处理大全(附代码) pandas 重复数据处理大全(附代码) 感兴趣可以关注这个话题pandas数据清洗...在这种情况下,速度提高了大约14倍(因为内部优化会让.str.upper()仅对分类的唯一类别值调用一次,然后根据结果构造一个seires,而不是对结果中的每个值都去调用一次)。 怎么理解?...结果竟是一个object类型,数据压缩的效果也没了,现在的结果再次回到刚才的6MB内存占用。...默认情况下,当按category列分组时,即使数据不存在,pandas也会为该类别中的每个值返回结果。...category列的分组:默认情况下,获得数据类型中每个值的结果,即使数据中不存在该结果。可以通过设置observed=True调整。

    1.2K20
    领券