Pandas保留最新的行值和聚合值

文章/答案/技术大牛

发布

1回答

python、pandas

如果项目未通过测试，则在以后的数据中重复该测试，并更新传递的值。Pass Pass Pass Fail 30072020 Project1 None None None Pass 我想创建另一个dataframe，它只保留最后的日期，并将测试结果聚合为通过，如果有任何日期通过的话。

浏览 22提问于2020-08-05得票数 0

2回答

保存Pandas组中第一行的所有列值和后续行中的任何更新？

python、pandas、dataframe、aggregate、pandas-groupby

我有一个带有id列、日期列dt和一些可能包含0或1(或根本没有值)的二进制列的Pandas。，从最早的日期到最近的日期，保留最新的值，但是忽略了从数字到非的任何更改。每个ID将有一行显示最新的已知值。如果列

浏览 1提问于2020-07-03得票数 1

回答已采纳

0回答

保留最新的值并删除较旧的行(pandas)

python、datetime、pandas、dataframe

我有一个下面的数据框表，其中包含新值和旧值。我想删除所有旧值，同时保留新值。Foo 12:17:37 Rand15 Bar 09:01:00 Rand5 我尝试使用下面的代码，但这删除了一个新值和一个旧值df[~df[['Time', 'Comment']].duplicated(keep='first

浏览 3提问于2017-01-10得票数 2

回答已采纳

1回答

如何在MongoDB中获取聚合中最后定义的值？

javascript、node.js、mongodb

我有一个集合，其中的文档有时包含status字段，有时不包含data字段。我试图构造一个查询来获取两者的最新值，但是当使用$last运算符时，我从最新的文档中获取值，并导致status有时是null。如何检索最新定义的status值，同时仍然保留最新文档中的data值？当前聚合： const project = await collectio

浏览 32提问于2021-11-23得票数 1

1回答

我有一个数据类型为datetime64[ns]的整数索引pd.Series，名为timestamps。(timestamps已排序，但这无关紧要) 我想计算另一个名为first_on_day的序列，它具有相同的索引和相同的数据类型，表示一天中最早的时间。timestamps.groupby(timestamps.dt.date).apply(lambda series: pd.Series(series.min(), index=series.index)) 有没有一种更惯用的<

浏览 16提问于2021-07-22得票数 0

回答已采纳

2回答

获取特定列的行和- Python

python、pandas、sum、row、aggregate-functions

我创建了一个简单的dataset df，它有三列：Area、Year_2010和Year_2020。(即Year_2010和Year_2020)，我希望获得所有相关行的和。和的输出应出现在两列的新行中。Germany 125 300如何获得特定列的行<

浏览 3提问于2022-09-13得票数 1

回答已采纳

1回答

在Server中聚合、存储和使用数据的最佳方法(触发器、计划作业、SSAS?)

sql-server、sql-server-2008-r2

我们有一个包含空间数据和一些属性的表，需要对其进行聚合，以便在各种查询中使用。请注意，FeatureId实际上引用了来自不同表的实际行(形状)。我们在这个表中有大约250 k行，目前有重叠的间隔和各种时间戳(历史记录)。我们的聚合过程试图在所有的时间间隔中找到最新的值，因此它需要根据时间戳剪切和连接间隔，并保留相关的</

浏览 0提问于2016-01-08得票数 7

2回答

如何在大熊猫第二栏的基础上去除重复？

python、pandas

import pandas as pd 'year': [2017, 2018, 2018, 2019, 2019], 'id': ['72297143', '6de190ee', '0e1e8e89', 'ab4f99ab', '7d81a711']对于ye

浏览 0提问于2019-05-20得票数 1

回答已采纳

2回答

HBase的最新版本是根据时间戳值保留的，还是实时添加的？

hbase

在HBase中，您可以设置最低版本和最高版本以保持值。该时间戳是否控制将保留的内容？例如，如果我将第一行的时间戳修改为100，然后插入第二行，时间戳为99，最大版本值设置为1，是保留第一行(最新时间戳)还是第二行(最新插入时间)？非常感谢你的回答。如果它没有保留时间戳为100的行，有没有数据

浏览 0提问于2013-01-03得票数 0

回答已采纳

1回答

在一列上聚合函数，在另一列上分组，使第三列不受影响。

sql-server、group-by、aggregate-functions

我觉得这并不是太糟糕的问题，但我一直在寻找一个解决办法在一天的大部分时间，但没有任何效果。我所见过的其他解决方案似乎帮不上我的忙，比如获取非唯一值的列以及group和聚合函数。例如，“在30天前获取所有记录，并使用每个源的最新日期条目，得到唯一源值的总和”。| 2015-11-16然后最后一步是对值</em

浏览 1提问于2016-12-05得票数 0

回答已采纳

2回答

按多列聚合，和一列，保留其他列？基于聚合值创建新列？

r、aggregate、grouping

我需要将df聚合为2列ProductID和Day，并将来自不同列Amount的每个聚合组的值相加，以便它现在显示总计。我希望保留可以分组的其他列(行间的值相同)，在本例中，仅保留Product。最后一列Store不会保留，因为值在分组行中可能会有所不同。但是，我需要添加一个列UniqueStores，它计算同一ProductID和</em

浏览 0提问于2020-08-30得票数 1

回答已采纳

2回答

如何在保留整行的同时获得单行的最大值？

scala、apache-spark、apache-spark-sql、spark-dataframe

我想为每个id获取单行，其中只存在charge列的最大值。输入数据示例：11 hg 10 22 aa 40我尝试过的代码：我只得到最大值，如下所示：40 id name charge22 aa 40如何同时

浏览 2提问于2018-01-31得票数 0

回答已采纳

2回答

熊猫:如何通过某一列的值和或行计数来汇总数据？

python、pandas

我有Pandas dataframe，很简单，就像：>>1>>3>>15我想用两种方式聚合这个数据：aggregatedByCount 24 19 当在columnA中的值之和超过某个阈值时(例如10 )进行聚合。a

浏览 3提问于2020-09-06得票数 0

1回答

删除具有列中值所赋予的优先级的重复索引

python、pandas

我有一个n行的DataFrame。>>> import pandas as p >>> df = p.DataFrame({'id':['a','a','b', 'b'], 'test':['e','y','g',不要介意它是第一个、最后还是中间<em

浏览 0提问于2014-11-07得票数 1

回答已采纳

3回答

Pandas:按名称分组并取最近日期的行

python、pandas

我有一个带有A, B, C, D, date列的熊猫DataFrame。我想过滤掉A和B的重复项，保留date中具有最新值的行。因此，如果我有两行，如下所示： A B C D date 1 1 2 3 1/1/18 我可以通过循环来做到这一点，但我

浏览 12提问于2018-12-22得票数 1

5回答

根据某些列中的空值删除行(pandas)

python、pandas

我知道如何从包含所有空值或单个空值的DataFrame中删除一行，但是您能根据指定的一组列的空值删除一行吗？例如，假设我正在处理包含地理信息(城市、纬度和经度)以及许多其他字段的数据。我希望保留至少包含城市值或LAT值和long值的行，但删除所有这三个值都为NULL值<em

浏览 2提问于2017-02-09得票数 6

1回答

在相同的ROWKEY更新中，如何更新ksql表的行？

apache-kafka、ksqldb

将一组数据推送到主题和表中。发布了一个查询并得到了响应。这是我第二次将相同的数据推到topic中，table再次加载。现在，当我查询时，响应是2行，而不是带有2种不同ROWTIME时间戳的1行。我认为，如果相同的ksql table进入并保留最新值，则key应该覆盖该值。但这是不可能的。我的理解正确吗？如何使table保留最新值</em

浏览 1提问于2019-04-05得票数 2

回答已采纳

1回答

如何删除大熊猫数据中的重复数据记录

python、pandas、dataframe、duplicates

嗨，亲爱的，我是学习蟒蛇和熊猫的新手。我想用Python和Pandas删除数据中包含重复数据的重复数据记录。在dataframe中，我有两个列"code“和"number”。有几个重复行对“代码”具有相同的值，每个行对应一个数字。我只希望保留一个代码，并保存最大的相应数目。例如："a“有三个值:7、5和</e

浏览 3提问于2020-06-17得票数 0

回答已采纳

1回答

如何按日期删除Mongodb上的重复值

python、mongodb、pymongo

我有两个要合并的集合。合并后，我需要删除重复的值，保留最新的文档并删除较旧的文档。我已经尝试通过聚合方法来完成此任务： self.collection.aggregate([ '$lookup': { 'obs': {'$not': i

浏览 27提问于2019-10-17得票数 0

1回答

熊猫:根据相同的列值但不同的行和条件更新某些列值。

python、pandas

我正在使用Python3.6和Pandas0.25。"A1"s“，以及col1_data中所有”A2“的”正确值“。基本上，我希望dataframe看起来像：基本上，我需要基于组(col1_data值)进行数据更新，但不需要聚合，也就是说，我不想减少行数。因此，如果有3行具有相同的值(A1)，那么这三行都应该在col2_data (好值)中具有相同的

浏览 1提问于2020-02-23得票数 0

回答已采纳

点击加载更多