我试图找出scala dataframe中单行中不同列的最大值。 dataframe中可用的数据如下所示。VALUE":9.7825}]|[{"TIME":1569560531009,"VALUE":1.7825}]|[{"TIME":1569560531010,"VALUE":3.7825}
浏览 38提问于2019-10-16得票数 0
给定一个Spark DataFrame df，我想在某个数值列'values'中找到最大值，并获得达到该值的行。我当然可以这样做：# since I hope I get this done with DataFramepandas.Series/DataFrame和numpy.array的argmax/id
浏览 0提问于2016-08-07得票数 15
回答已采纳
如何使用单行命令来查找数据帧中列中所有值的基数？只使用熊猫。我有一列由不同字符串组成的数据，我希望计算该列中每个值出现的次数。示例
df = pd.DataFrame({'Animal':['cat', 'dog', 'bird', 'dog', 'bird',
浏览 3提问于2022-09-22得票数 0
名称可以在单个数据name中具有不同的值。当我使用spark (scala)将数据写入elasticsearch时，我希望根据列"name“的值将数据写入不同的索引。dataframe.saveToEs("index-name")dataframe.saveToEs(col("&quo
浏览 8提问于2020-01-11得票数 1
回答已采纳
2回答
我有一个包含2列tag和value的数据帧。我试着像下面这样做，但是它不起作用。val df2 = df.withColumn("max",max($"value"))
如何将max列添加到数据集中？
浏览 37提问于2018-05-31得票数 2
回答已采纳
我有一个python格式的dataframe (多行，2列)。我想根据列2中的最大值，用列1中的唯一值修改DF (如果有帮助，列2将按升序排序)。我可能会写一个循环，但我更喜欢单行或两行的解决方案。14200 10200 30400 0
400
浏览 1提问于2017-03-28得票数 5
我正在寻找Scala中的一个命令，以在DataFrame中的所有列中查找空值之和。你能告诉我同样的scala命令吗？
浏览 4提问于2022-10-22得票数 0
Dataframe：
当我按CountryA和Country B分组并使用max()时，它会在给我的年份列中查找最大值：maxMonth =countryUnits.groupby(['CountryA','CountryB']).max()当前输出的7行图像我需要做什么才能让它在Unit
浏览 3提问于2021-07-31得票数 1
回答已采纳
1回答
在单个Dataframe中对不同列的多个操作PNO VAL1 VAL2 VAL3 VAL4 CNT30000 24 96 52 25 1
我想要创建一个结果dataframe，它将对不同的<e
浏览 0提问于2018-09-07得票数 0
回答已采纳
我有一个具有重复度量的数据集:嵌套在参与者中的度量(ID)嵌套在组中。在组水平上测量一个变量G(范围为0-100) .我想创建一个新列，显示：
G的最大值在编码为0的组中达到最大值的第一天。每次测量(在同一组中)在达到最大值的日期之前或之后发生了多少天。例如:在最
浏览 2提问于2020-06-22得票数 0
我希望在我的DataFrame中找到每一行的3个最大值，但只从某些列中查找(即我的DataFrame中总共有10列，但我希望它在计算最大值时只考虑6列)。当找到3个最大的时，
我想在现有的DataFrame中创建三个新列，名为“Top 1”、“Top 2”和“Top 3”。我
浏览 0提问于2021-05-25得票数 0
在Scala中，我可以从内存中的字符串创建一个单行DataFrame，如下所示：val df = sqlContext.sparkContext.parallelizejsonValues).toDF("fizz")当df.show()运行时，它会输出：| fizz|| buzz|--现在我
浏览 0提问于2016-10-10得票数 9
回答已采纳
我正在寻找一种整洁的方法来找到每一列的最大值，并收集在地图中作为{col name:max value of col}。下面是我在一个玩具示例中所取得的进展。在我的完整数据中有数百列，所以手动转换每一列是不可行的。scala> import spark.implicits._
scala&
浏览 49提问于2020-06-12得票数 0
回答已采纳
1回答
根据与正当值(而不是NaNs)相对应的索引号，自动查找不同点处的值，因为根据我对初始数据设置的函数，整个数据中将有许多NaNs。我有一个图形(名为‘DataFrame’)，我挑选了整个(743个初始行)中相对最小/最大值的特定点，并能够将这些最小/最大值的索引点放入数组中，并将它们添加到‘DataFrame’数据帧('closemin
浏览 0提问于2019-03-11得票数 2
7回答
这个df有"A“、"B”和"C“列。现在假设我有一个Array，它包含这个df列的名称：我想以这样的方式来做一个df.select()，这样我就可以指定哪些列不能选择。例如:假设我不想选择列"B“。我试过了但这不起作用，因
浏览 21提问于2015-07-15得票数 22
回答已采纳
2回答
我有一个场景，我需要根据值从dataframe进行动态函数调用。scala> var feature="\"max\""scala> val someDF = Seq( |(64, "mouse"), | ).toDF("number",
浏览 17提问于2020-12-02得票数 0
回答已采纳
我让代码在for循环中运行。对于循环的每次迭代，我找到DataFrame中该行的最大值，然后创建一个列索引列表，该值出现在该列表中(因为它有时可能出现多次)，最后获取该列表的max()，以给出包含最大值的行的最高列索引。之后(我想这就是原因)，我的"peaklist“创建现在失败了，IndexError显示”布尔索引在
浏览 17提问于2021-04-19得票数 0
回答已采纳
4回答
我有这样的数据0 2 4 3 1 6 50 6 5 4
我如何才能实现这个最有效的(w.r.t. )内存的使用，执行时间和与dask并行的能力)？性能@stark (dataframe with 500
浏览 3提问于2019-11-25得票数 1
回答已采纳
云服务器
ICP备案
腾讯会议
云直播
对象存储
腾讯云开发者
