如何在绘制csv时处理重复项？

文章/答案/技术大牛

发布

1回答

python、pandas、matplotlib

我有一个csv文件和一个python脚本，其中我使用pandas和matplotlib来绘制值。脚本是 #!matplotlib.pyplot as pltimport pandas as pd in_csv_file=argv[0] df= pd.read_csv(in_csv_file) print(d

浏览 25提问于2021-10-21得票数 2

回答已采纳

1回答

如何在pyspark数据帧中使用write.partitionBy时删除重复项？

python、apache-spark、pyspark、apache-spark-sql、databricks

-------| 我想根据名称和类型对此数据帧进行分区并将其保存到磁盘当前的代码行如下所示： df.write.partitionBy("Name", "Type").mode("append").csv("output/", header=True) 输出被正确保存，但有重复的行，如下所述在文件夹中 /output/Roger/A |---------------|---------------|-------------|-----

浏览 15提问于2020-10-08得票数 0

回答已采纳

1回答

向事实数据表添加代理键？

sql-server、database

我只对何时发生更改感兴趣，所以我删除了重复项，然后为effective_date和expiration_date以及is_current添加了一列。事实文件：当我将它与每日快照文件连接时，这个整数应该反映某个日期的某个员工(在生效日期和到期日期之间)。

浏览 3提问于2016-04-18得票数 0

1回答

R，想要一个可旋转的3d图，给定一个列表x，y；z=每个不同提供的x，y的计数

r、plot

我有一个x，y数据的CSV，我想绘制它们，但使用z轴来显示每个不同x，y组合的计数。fwc <- read.csv(file="resultsort.csv",head=FALSE,sep=",")我找到了 vis.supstat.com/catego

浏览 1提问于2014-03-29得票数 0

1回答

如何分析哪组十个数字是重复的？(乐透)

regex、text、repeat、emeditor

如何分析哪组十个数字是重复的？如何在EmEditor文本编辑器中实现？03,04,05,09,12,15,20,24,26,28,31,33,35,37,43,48,64,70,72,75 06,05,07,10,12,15,21,24,30,28,31,39,35,37,43,49,64,70,72,76 CSV

浏览 31提问于2019-05-20得票数 -1

1回答

删除CSV中的所有重复条目

powershell、duplicates

我有一个和这个类似的问题： 1柏林德国1慕尼黑德国3华盛顿美国4维也纳奥地利因此，在这种情况下，预期的结果是：4维也纳奥地利#First I load a csv.$Liste = import-

浏览 1提问于2019-10-24得票数 1

回答已采纳

1回答

并行ForEach工作流不能导出-CSV

csv、powershell、foreach、parallel-processing、workflow

我正在尝试编写一个工作流，它将根据每个额外的行来评估CSV的每一行，以估计哪些行可能是重复的。我有23,000+行，所以Powershell需要5天的时间来执行这个脚本。我终于让工作流在没有抛出错误的情况下工作了，但它实际上并没有导出CSV文件。有什么想法吗？workflow Leads-Workflow $leads = Import-CSV

浏览 1提问于2015-07-09得票数 0

1回答

psycopg2 cursor.copy_from()是否正在加载重复项？

python、python-3.x、postgresql、psycopg2

使用Python中的psycopg2包将数据从CSV文件加载到Postgres中的表。此CSV文件每小时重新生成一次，当与其他时间的文件进行比较时，该文件中可能存在重复项。connect(user='postgres',password='password',database='postgres') file = open('test.csv','r

浏览 34提问于2019-12-11得票数 0

1回答

时间戳排序

python、sorting、timestamp

48.0849 57.0220 55.8769 6.1289 811 -1 -1 D0F2 0F14 F8B1 FFE4 # 我必须按照时间戳的顺序对数据进行排序，然后删除重复的时间戳

浏览 2提问于2018-03-13得票数 0

2回答

如何排除将CSV文件中的重复条目导入到MySQL中？

mysql、csv

我有一个包含许多重复条目的CSV文件。如何在不导入重复项的情况下将条目导入MySQL？

浏览 0提问于2012-01-17得票数 0

回答已采纳

2回答

读取PowerShell中较大的CSV解析多列以获得唯一值根据列中最早的值保存结果

powershell、csv、unique、large-data

我有一个很大的1000万行文件(当前是CSV)。我需要通读文件，并删除基于多列的重复项。数据行的示例如下所示： ComputerName、IPAddress、MacAddress、CurrentDate、FirstSeenDate 我想检查MacAddress和ComputerName中是否有重复项，如果发现重复项，则保留具有最旧FirstSeenDate的唯一项。我使用import-csv将CSV读取到一个变量中，

浏览 17提问于2019-06-02得票数 0

1回答

基于单参数形状的python数据帧分割

python、pandas、dataframe、csv、split

', delimiter=',') 在此数据帧中，有许多重复行--例如，第一行重复超过1000次，其他行则如此。当我绘制时间分布时，我得到了一个数字，它显示了时间参数的频率。'time',kind = 'hist',figsize=(10,10))

浏览 0提问于2021-09-03得票数 0

回答已采纳

1回答

用未知标头绘制D3.js CSV图

javascript、csv、d3.js、charts

我正试图用is本机CSV解析器[ d3.csv() - ]在D3.js中绘制一个图表。下面是通过d3.csv()绘制的分组条形图的一个例子- State,Under 5 Years,5 to 13 Years,14 to 17 Years,18 to 24 Years,25 to 44 Years,45 to 64 Years,65 Years

浏览 2提问于2014-03-18得票数 0

回答已采纳

2回答

在php中删除多维数组中的重复值

php、arrays、multidimensional-array、associative-array

我有csv文件，我正在读取其中的数据，我有连接所有随机匹配他们的行，如品牌，客户等..，在这里您可以看到所有重复的值是如何附加到数组中的：这是我的php代码//echo '<pre>'; //pri

浏览 22提问于2018-03-01得票数 2

回答已采纳

1回答

带重复x值的动态图setAnnotations

javascript、dygraphs

我有一个具有重复x值的csv，当我用这个x值调用setAnnotations函数时，会绘制重复的注释。示例csv：0,1,1,31,3,3,33,1,2,2 当我将注释设置为x=1时，有向图形绘制2注释。我需要知道是否存在任何对有向图形说只绘制一个注释的方式。

浏览 4提问于2017-05-16得票数 1

回答已采纳

1回答

如何将一列添加到多个具有不同值的.csv文件

python、csv、dataframe

我有以下场景:我有一个包含多个.csv文件的文件夹，我最终希望合并并删除重复的文件。我目前遇到的问题是，我只想删除合并文件时产生的重复项。换句话说:一些单独的.csv文件已经有了我不想删除的重复行。为了实现这一点，我考虑为每个单独的.csv文件分配一个具有固定值的额外列。我的想法是，我将只删除那些在额外列中具有不同值的重复项我已经知道如何将这样的列分配给单个csv文件。但我不知道如何在

浏览 22提问于2019-09-03得票数 0

回答已采纳

2回答

在pandas中保留NaNs的同时删除重复项

python、pandas

在使用drop_duplicates()方法时，我减少了重复项，但也将所有NaNs合并到一个条目中。如何在保留具有空项(如np.nan, None or '')的行的同时删除重复项？

浏览 1提问于2014-05-07得票数 20

2回答

要从CSV文件中检索数据，请对其进行拆分，并将其中一列的数据存储在字符串数组中，而不存在重复项

java、csv

条件1: csv文件类似于abc^^cde^ram,siri^ravi条件3:字符串数组不能包含重复项。void main(String[] args) throws IOException FileInputStream

浏览 0提问于2013-07-10得票数 0

1回答

将处理过的数据从R控制台中取出并创建csv

我使用R从csv文件中删除重复项，方法如下(lda_data是我的csv文件名)这很有效，但是我需要将结果从控制台获取到另一个csv文件中。将csv文件中经过处理的数据放入另一个新的、经过处理的csv文件的方法有哪些？提前谢谢。

浏览 13提问于2016-07-28得票数 0

7回答

C#异常处理继续发生错误

c#、exception、csv

我有一个基本的C#控制台应用程序，它逐行读取文本文件(CSV格式)，并将数据放入HashTable。行中的第一个CSV项是键(id num)，行的其余部分是值。但是，我发现我的导入文件有一些不应该有的重复键。当我试图导入该文件时，应用程序错误将退出，因为您不能在HashTable中拥有重复的键。不过，我希望我的程序能够处理这个错误。当我遇到一个重复的键时，我想把这个键放到一个数组列表中，然后继续将剩下的数据导入到哈希表中。我如

浏览 9提问于2008-09-25得票数 2

回答已采纳

点击加载更多