SQL:查找重复记录，但只返回最新的重复记录？

文章/答案/技术大牛

发布

1回答

mysql、sql、mysql-5.1

我试图在我们的数据库中找到重复的传输，在这种情况下，找出发射器在哪里连续多次传输相同的数据(3次或更多)。我已经尝试了这个查询，这使我很接近，但当我只想要最近的重复读数周期时，每个发射器的重复读数周期返回一条记录 select transmitter_id, count(*) as--+----------------------------+-------------+------------------------+ 有没有人知道在MyS

浏览 23提问于2020-08-19得票数 0

6回答

从SQL Server 2012中查找最新的重复记录

sql-server

我想查找SQL Server 2012中最近的重复记录。这是我的表结构。我有一个名为UserRegistration的表名，其中包含UserID(GUID)的副本，在同一个表中，我还有CreatedDate列(Date)。现在，我想从该表中查找最近的重复记录。下面是相同的数据。现在我想找到最近的，这意味着它应该只返回那些有重复的

浏览 0提问于2015-09-28得票数 1

1回答

用于模糊匹配重复数据删除的SQL

sql、duplicates、fuzzy-comparison

表A包含具有重复实体的记录，这些实体具有细微的字符串变化。不存在唯一标识实体的唯一键。字段"ID“标识表内的记录，而不是实体本身。这就是查找表B的创建方式，它有两个列: ID1和ID2，表示表A中匹配记录的ID。和3，以便只保留第一条记录。TABLE A ID;SomeString有没有办法通过SQL对表A执行这种模糊匹配重复数据删除，将表B用

浏览 32提问于2018-09-07得票数 1

回答已采纳

1回答

pyspark中对应的行id是什么？

apache-spark、pyspark、netezza

在我们遗留DWH过程中，我们根据传统RDBMS中的rowid查找重复记录并跟踪重复记录。将仅返回对应最大记录的重复记录。即使当我们识别重复记录时，这也有助于识别/跟踪记录。在pySpark中有没有类似的东西？如何在dwh到pyspark dwh转换项目中处理此问题？

浏览 11提问于2019-11-10得票数 0

回答已采纳

1回答

从mysql表中删除重复项，但最多允许10个

mysql

我正在尝试找出单个sql语句来删除表中的重复记录，但允许多达10个重复记录。我可以执行以下查询来查找这些重复项，但我不知道要执行什么查询才能删除前10个重复项之外的所有重复项： ip, count(ip) as count FROM

浏览 4提问于2012-02-05得票数 1

回答已采纳

2回答

SQL选择一列中具有重复值的不同行，并根据主键字段中的值为每个重复项选择一行

sql、select、duplicates、subquery、primary-key

我有一个在FacilityID上有重复记录的SQL表。FacilityKey是唯一的。我需要选择在FacilityID上有重复项的行，但我只想为每个行显示一条记录，并且我想选择具有最新(最高) FacilityKey的行。有人能帮我弄清楚如何写我的查询吗？我已经尝试了我能想到的一切，并在互联网上搜索了一些类似的东西，但都没有用。我所能找到的都是识别重复记录的示例。

浏览 0提问于2015-03-21得票数 4

回答已采纳

1回答

SQL:如何从重复行中选择第一条记录？

sql、sql-server、tsql、duplicates

在执行以下查询以查找副本时select a.* ,count (*) over (partition by a.ID) as tot) ttwhere tt.tot >1我执行了另一个查询以查找非重复记录。* from (from HREMP a where tt.tot =1 及其返回的<

浏览 0提问于2018-03-25得票数 3

回答已采纳

1回答

用于查找两个字段差异的sql查询

sql-server-2008

我有一个sql server2008db，专注于一个包含超过3亿条记录的表中的两个特定列。我想找出表中的重复记录，但从结果集中区分出有多少重复记录，以及是否有任何重复记录有不同的字段。[LogFeed]having COUNT(entryId) > 1因此，我要查找以下记录:对于任何重复的idUrl，是否有任何

浏览 1提问于2012-10-16得票数 0

回答已采纳

3回答

只将唯一行插入到SQLite中(python)

python、sqlite

我使用cursor.executemany将CSV文件中的几批行插入到一个SQLite表中，根据主键字段，其中一些行应该是重复的。如何有选择地只插入非重复的行，而不必提前手动过滤掉它们？我知道在纯Python中，您可以简单地创建一个错误异常并跳过重复的行--在这个用例中有没有类似的实现？

浏览 1提问于2012-12-02得票数 13

回答已采纳

2回答

是否可以删除基于多列的数据库重复？

sql-server、database

I 删除基于列的重复记录。答案很有效：where id NOT inselect min(id)group by sourceid我现在有一个类似的情况，但重复记录的定义是基于多列的如何修改上述SQL以识别重复记录，其中唯一记录被定义为从Col1 + Col2 + Col3连接而来。我会做这样的事吗？

浏览 1提问于2012-07-23得票数 12

回答已采纳

2回答

如何在sql中比较查找重复记录两段时间

php、sql

如何比较sql中查找重复记录的两个范围时间。

浏览 4提问于2014-11-28得票数 0

4回答

SQL查询-如果超过3个副本，是否删除重复项？

sql、sql-server、duplicates

有没有人有一个优雅的sql语句来删除表中的重复记录，但前提是重复记录的数量超过x？所以它最多允许2到3个副本，但仅此而已？但现在我想要做的是，如果这些行有超过2个重复项，则只删除这些行。谢谢

浏览 2提问于2009-07-24得票数 6

回答已采纳

5回答

在Access 2003中删除重复项

ms-access、duplicates

我有一个包含约4000条记录的Access 2003表，它由17个不同的表组成。这些记录中大约有一半是重复的。没有唯一的标识列(id、name等)。有一个id列，它是在合并表时自动填充的，这意味着重复项并不完全相同(尽管如果这样做更方便的话，可以删除此列)。我已经使用了Access的查找重复记录查询向导，它给了我一个重复记录的列表，但不让我删除它们(说真的，如果我不能删除它们，这个查询有什么用？)。我尝试将生成<em

浏览 1提问于2009-10-22得票数 6

回答已采纳

1回答

用于从MS Access中删除重复记录的查询

sql、ms-access、duplicates

我有一个包含多个重复记录的表。我正在使用MS Access。我想使用查询删除重复的记录。------+------------------1234 | 12345 | 2我希望我的查询结果是也许使用SQL？我尝试使用查询向导，但它只给出重复记录的列表。非常感谢您的帮助。谢谢

浏览 4提问于2020-05-16得票数 0

回答已采纳

5回答

在SSIS中提取不同的记录

sql-server-2008、ssis、duplicate-removal

我正在编写SSIS包，以便将数据从*.csv文件导入到SQL2008DB。问题是其中一个文件包含csv文件中的重复记录，而我只想从该源中提取不同的值。请看下面的图片。我确实使用了LookUp组件。但它只根据传入数据检查现有数据。它不检查传入数据中的重复记录。

浏览 0提问于2011-03-29得票数 2

回答已采纳

2回答

SQL服务器与客户端之间的查询

sql

我创建了一个查询:从HR_Tsalary中选择*，其中月份=‘3’和年份='2010‘，结果是473条记录，我找到了2条重复记录，然后我创建了另一个查询，只查找重复记录:选择Emp_No，COUNT()，从HR_Tsalary中选择Emp_No '10’和month='3‘组，由Emp_No进行计数()>1，结果是来自客户端的零记录(通过代码)。但是当我从服务器端使用相同的查询时，结果是2个记录。在从服务器端和客户端创建查询时有什么不同吗？

浏览 1提问于2010-04-22得票数 0

1回答

Select ( SQL语句中未使用所有参数)

python、mysql、web-scraping、scrapy

嗨，我的代码有问题，我想检查管道process_item中的重复ID，如果没有重复的id，我将在表中插入项目这是我的代码 def process_item(self, item, spider):

浏览 18提问于2019-04-19得票数 0

3回答

消除数据清理中的重复记录

maintenance

我有一个数据库的人的记录与简单的信息，如名字，姓氏，电子邮件，地点，.。我需要消除重复的记录。正如我搜索的那样，这个过程被称为“数据清洗中的重复消除”。有人知道一个很好的开源工具吗？

浏览 0提问于2013-05-28得票数 1

5回答

Rails 5 ActiveRecord删除重复

ruby-on-rails、activerecord

我有一个包含URL数据的表，这些数据来自不同的来源：1 http://google.com3 http://

浏览 2提问于2016-11-08得票数 8

回答已采纳

1回答

查找重复项和更新顶点属性的Gremlin查询

python、gremlin、amazon-neptune、gremlin-server、gremlinpython

我希望查找重复记录并将属性 isDuplicate更新为yes。.has("customerId") \.unfold() \上面的查询也返回单个记录。

浏览 3提问于2020-12-09得票数 1

回答已采纳

点击加载更多