文档建议反馈控制台
首页
学习
活动
专区
圈层
工具
文章/答案/技术大牛
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

最近，又发现了Pandas中三个好用的函数

导读 笔者早先学习Python以及数据分析相关知识时，对Pandas投入了很多精力，自认掌握的还算扎实，期间也总结分享了很多Pandas相关技巧和心得（点击上方“Pandas”标签可以查看系列文章）。...iteritems的更多文档部分可自行查看 笔者猜测，可能是在早期items确实以列表形式返回，而后来优化升级为以迭代器形式返回了。不过在pandas文档中简单查阅，并未找到相关描述。...我个人总结为如下几个方面： 方便的以(columnName, Series)元组对的形式逐一遍历各行进行相应操作 以迭代器的形式返回，在DataFrame数据量较大时内存占用更为高效 另外，items是...由于行索引作为namedtuple中可选的一部分信息，所以与iteritems和iterrows不同，这里的返回值不再以元组队的形式显示行索引信息。...相关阅读： 写在1024：一名数据分析师的修炼之路 数据科学系列：sklearn库主要模块简介 数据科学系列：seaborn入门详细教程 数据科学系列：pandas入门详细教程 数据科学系列：matplotlib

2K10

Pandas系列 - Series基本功能

系列基本功能 DataFrame基本功能 系列基本功能 编号 属性或方法 描述 1 axes 返回行轴标签列表 2 dtype 返回对象的数据类型(dtype) 3 empty 如果系列为空，则返回True...4 ndim 返回底层数据的维数，默认定义：1 5 size 返回基础数据中的元素数 6 values 将系列作为ndarray返回 7 head() 返回前n行 8 tail() 返回最后n行 axes...示例： import pandas as pd import numpy as np # Create a series with 100 random numbers >>> s = pd.Series...## 将系列作为ndarray返回 array([-0.56295907, 1.54666615, -0.95013554, -0.06782656]) >>> s.head() ## 返回前n行...轴/数组维度大小 6 shape 返回表示DataFrame的维度的元组 7 size NDFrame中的元素数 8 values NDFrame的Numpy表示 9 head() 返回开头前n行 10

37020
    • 您找到你想要的搜索结果了吗？
    是的
    没有找到

    零基础5天入门Python数据分析：第五课

    在第一第二课已经讲了notebook的基础使用，python的基础语法及常用的数据结构及其运算，包括: 整型: int 浮点型: float 布尔型: bool 字符串: str 元组: tuple 列表...主要解决以下问题： 统计班级人数 统计各科平均分 统计总分的平均分 按总分进行排序，并导出数据 统计班级男生女生的人数 统计不同性别的总分的平均分 统计不同性别下，各科的及格人数和不及格人数 学生成绩的分布情况 作为这个系列的最后一篇...1.1 统计班级人数 在我们的例子里，每一行表示一个学生，所以统计人数，只需要计算行数即可： len函数可以直接返回行数，而常用的应该是使用shape这个属性，返回的是数据的shape，如上的(50...3.1 统计班级男生女生的人数 在pandas中，groupby可以用来做分组，它返回的是一个可循环的对象，这个对象有一个size方法，就能计算出男生和女生的人数。...，元组的第一个元素值是性别，第二个元素其实是一个pandas表格（DataFrame）。

    1.6K30

    python数据分析——Python数据分析模块

    Pandas则是一个开源的、提供高性能、易于使用的数据结构和数据分析工具的Python库。它提供了数据清洗、数据转换、数据处理等一系列功能，使数据分析变得更加简单高效。...关于random 直接给参数传一个整数，即size=3 np.random.random(3) 返回值：是一个一维数组，注意他不是列表 给参数传一个元组，即size=(3, 3) np.random.random...np.random.randint(10, 23) 返回值：仅仅得到一个整数，得到的整数总是在10和23之间 np.random.randint(10, 22, (3, 2)) 返回值：返回的数据是在...10到22之间，是3*2的元组，是元组还是列表，由最后一位参数是元组还是列表决定 关于rand np.random.rand(2) np.random.rand(2, 3) 1.2Numpy数组统计方法...二、Pandas模块 Pandas是Python环境下非常重要的数据分析库。当使用Python进行数据分析时,通常都指的是使用Pandas库作为分析工具对数据进行处理和分析。

    26410

    Pandas系列 - 基本功能和统计操作

    全部包含 一、系列基本功能 编号 属性或方法 描述 1 axes 返回行轴标签列表 2 dtype 返回对象的数据类型(dtype) 3 empty 如果系列为空，则返回True 4 ndim 返回底层数据的维数...，默认定义：1 5 size 返回基础数据中的元素数 6 values 将系列作为ndarray返回 7 head() 返回前n行 8 tail() 返回最后n行 axes示例： import pandas...## 如果系列为空，则返回True False >>> s.ndim ## 返回底层数据的维数，默认定义：1 1 >>> s.size ## 返回基础数据中的元素数 4 >>> s.values...## 将系列作为ndarray返回 array([-0.56295907, 1.54666615, -0.95013554, -0.06782656]) >>> s.head() ## 返回前n行...轴/数组维度大小 6 shape 返回表示DataFrame的维度的元组 7 size NDFrame中的元素数 8 values NDFrame的Numpy表示 9 head() 返回开头前n行 10

    70510

    Pandas 实践手册（一）

    本系列参考自「Python Data Science Handbook」第三章，旨在对 Pandas 库的使用方法进行归纳与总结。...我们可以简单地将 Pandas 对象理解为 Numpy 数组的增强版本，其中行与列可以通过标签进行识别，而不仅是简单的数字索引。Pandas 为这些基本数据结构提供了一系列有用的工具与方法。...2.2.1 DataFrame 作为广义 Numpy 数组 我们可以将 DataFrame 看做一个拥有灵活的行索引与列名的「二维」 Numpy 数组，其本质上就是一系列对齐（共享相同的索引）的 Series...而对于二维 Numpy 数组来说，data[0] 返回的是第一行，需要与 DataFrame 区分开来（其返回的是列）。...2.3.2 Index 作为有序集合 Pandas 对象的设计初衷之一是便于执行数据集之间的连接这样的操作。

    2K10

    pandas每天一题-题目1、2、3

    这是一个关于 pandas 从基础到进阶的练习题系列，来源于 github 上的 guipsamora/pandas_exercises 。这个项目从基础到进阶，可以检验你有多么了解 pandas。...---- 答案：A、B、D 解析： A：是 pandas 提供的指定方法，此外还有 df.tail 可以查看倒数n笔记录 B：df.iloc 可以指定位置索引，从而得到记录。...---- 答案：B、C、D B：df 本质上是通过 numpy 数组保存数据，为了与 numpy 尽可能保持用法一致，因此 pandas 为 df 设置了 shape 属性，能获取二维长度，他是一个元组...深入来说，只要对象有一个叫 __len__ 的方法，就能通过 len 函数返回。df 实现了该方法，并且把自身行记录返回。 D：df.info 方法可以获取数据集的整体信息，其中包含行数量。...---- 答案：B、D、E B：df 本质上是通过 numpy 数组保存数据，为了与 numpy 尽可能保持用法一致，因此 pandas 为 df 设置了 shape 属性，能获取二维长度，他是一个元组

    42520

    Python数据分析 | Pandas数据分组与操作

    pandas整个系列覆盖以下内容： 图解Pandas核心操作函数大全 图解Pandas数据变换高级函数 Pandas数据分组与操作 一、Pandas数据分组与操作 在我们进行业务数据分析时，经常要对数据根据....png] 转换成列表的形式后，可以看到，列表由三个元组组成，每个元组中： 第一个元素是组别（这里是按照company进行分组，所以最后分为了A,B,C） 第二个元素的是对应组别下的DataFrame...groupby之后可以进行下一步操作，注意，在groupby之后的一系列操作（如agg、apply等），均是基于子DataFrame的操作。 下面我们一起看看groupby之后的常见操作。...资料与代码下载 本教程系列的代码可以在ShowMeAI对应的github中下载，可本地python环境运行，能科学上网的宝宝也可以直接借助google colab一键运行与交互操作学习哦！...本系列教程涉及的速查表可以在以下地址下载获取 Pandas速查表 NumPy速查表 Matplotlib速查表 Seaborn速查表 拓展参考资料 Pandas官方教程 Pandas中文教程 ShowMeAI

    2.9K41

    使用 Bokeh 为你的 Python 绘图添加交互性

    在这一系列文章中，我通过在每个 Python 绘图库中制作相同的多条形绘图，来研究不同 Python 绘图库的特性。这次我重点介绍的是 Bokeh（读作 “BOE-kay”）。...Bokeh 的设计既允许你在 Web 上创建自己的交互式绘图，又能让你详细控制交互性如何工作。我将通过给我在这个系列中一直使用的多条形图添加工具提示来展示这一点。...数据可在线获得，可以用 Pandas 导入。...现在，你可以看到付出额外努力在 Bokeh 中将所有数据封装在 ColumnDataSource 等对象的原因了。作为回报，你可以相对轻松地添加交互性。...回归简单：Altair Bokeh 是四大最流行的绘图库之一，本系列将研究它们各自的特别之处。 我也在研究几个因其有趣的方法而脱颖而出的库。

    1.7K30

    在Python中实现Excel的VLOOKUP、HLOOKUP、XLOOKUP函数功能

    标签：Python与Excel,pandas Excel的LOOKUP公式可能是最常用的公式之一，因此这里将在Python中实现Excel中查找系列公式的功能。...==lookup_value返回一个布尔索引，pandas使用该索引筛选结果。...return_array.loc[]返回一个带有基于上述布尔索引的值的pandas系列，只返回True值。...pandas系列的一个优点是它的.empty属性，告诉我们该系列是否包含值或空，如果match_value为空，那么我们知道找不到匹配项，然后我们可以通知用户在数据中找不到查找值。...根据设计，apply将自动传递来自调用方数据框架（系列）的所有数据。在我们的示例中，apply()将df1['用户姓名']作为第一个参数传递给函数xlookup。

    7.4K11

    不再纠结，一文详解pandas中的map、apply、applymap、groupby、agg...

    2.2 apply() apply()堪称pandas中最好用的方法，其使用方式跟map()很像，主要传入的主要参数都是接受输入返回输出。...()中同时输出多列时实际上返回的是一个Series，这个Series中每个元素是与apply()中传入函数的返回值顺序对应的元组。...，每个元素是返回值组成的元组，这时若想直接得到各列分开的结果，需要用到zip(*zipped)来解开元组序列，从而得到分离的多列返回值： a, b = zip(*data.apply(lambda row...三、聚合类方法 有些时候我们需要像SQL里的聚合操作那样将原始数据按照某个或某些离散型的列进行分组再求和、平均数等聚合之后的值，在pandas中分组运算是一件非常优雅的事。...3.1 利用groupby()进行分组 要进行分组运算第一步当然就是分组，在pandas中对数据框进行分组使用到groupby()方法。

    5.9K31

    单列文本拆分为多列，Python可以自动化

    一旦我们将Excel表加载到pandas中，整个表将成为pandas数据框架，“出生日期”列将成为pandas系列。因为我们不能循环，所以需要一种方法来访问该系列中的字符串元素。...看一个例子： 图6 上面的示例使用逗号作为分隔符，将字符串拆分为两个单词。从技术上讲，我们可以使用字符作为分隔符。注意：返回结果是两个单词（字符串）的列表。 那么，如何将其应用于数据框架列？...让我们在“姓名”列中尝试一下，以获得名字和姓氏。 图7 拆分是成功的，但是当我们检查数据类型时，它似乎是一个pandas系列，每行是包含两个单词的列表。...我们想要的是将文本分成两列（pandas系列），需要用到split()方法的一个可选参数：expand。当将其设置为True时，可以将拆分的项目返回到不同的列中。...图8 正如预期的那样，由于存在多个列（系列），因此返回的结果实际上是一个数据框架。

    7.1K10

    NumPy 秘籍中文第二版：十、Scikits 的乐趣

    使用 Pandas 估计股票收益的相关性 从 Statsmodels 中将数据作为 pandas 对象加载 重采样时间序列数据 简介 Scikits 是小型的独立项目，以某种方式与 SciPy 相关，但不属于...我们可以将其与 NumPy 和 pandas 集成（在本章稍后的内容中将有更多关于 pandas 的信息）。 操作步骤 可以从这里下载源码和二进制文件。...此函数返回一个包含第二个元素的元组，即 p 值，介于 0 和 1 之间。...最后，将打印相关性，并显示一个图： 要创建数据框，请创建一个包含股票代码作为键的字典，并将相应的日志作为值返回。...另见 相关文档 第 4 章，“Pandas 入门书”，摘自 Ivan Idris 的书“Python 数据分析”， Packt Publishing 从 Statsmodels 中将数据作为 pandas

    3K20

    不再纠结，一文详解pandas中的map、apply、applymap、groupby、agg...

    map()还有一个参数na_action，类似R中的na.action，取值为None或ingore，用于控制遇到缺失值的处理方式，设置为ingore时串行运算过程中将忽略Nan值原样返回。...2.2 apply() apply()堪称pandas中最好用的方法，其使用方式跟map()很像，主要传入的主要参数都是接受输入返回输出。...输出多列数据 有些时候我们利用apply()会遇到希望同时输出多列数据的情况，在apply()中同时输出多列时实际上返回的是一个Series，这个Series中每个元素是与apply()中传入函数的返回值顺序对应的元组...可以看到，这里返回的是单列结果，每个元素是返回值组成的元组，这时若想直接得到各列分开的结果，需要用到zip(*zipped)来解开元组序列，从而得到分离的多列返回值： a, b = zip(*data.apply...3.1 利用groupby()进行分组 要进行分组运算第一步当然就是分组，在pandas中对数据框进行分组使用到groupby()方法。

    5K10
    点击加载更多

    扫码

    添加站长 进交流群

    领取专属 10元无门槛券

    手把手带您无忧上云

    扫码加入开发者社群

    相关资讯

    热门标签

    更多标签

    活动推荐

      运营活动

      活动名称
      广告关闭

      腾讯云开发者

      扫码关注腾讯云开发者

      扫码关注腾讯云开发者

      领取腾讯云代金券

      热门产品

      热门推荐

      更多推荐

      Copyright © 2013 - 2025 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有

      深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 深公网安备号 44030502008569

      腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号 | 京公网安备号11010802020287

      领券