首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

删除MySQL中的重复数据

前言一般我们将数据存储在MySQL数据库中,它允许我们存储重复数据。但是往往重复数据是作废的、没有用的数据,那么通常我们会使用数据库的唯一索引 unique 键作为限制。...问题来了啊,我还没有创建唯一索引捏,数据重复了(我就是忘了,怎么滴)。 那么如何在一个普通的数据删除重复数据呢?那我用一个例子演示一下如何操作。。。...和 不等于 2.中同时删除空的业务主键数据那么便有以下几个查询:/*1、查询中有重复数据的主键*/select rd2.iccId from flow_card_renewal_comparing rd2...rd2 GROUP by rd2.iccId having count(rd2.iccId)>1 )or iccId is null注意一点是mysql删除的时候会提示不能用查询的结果来做删除操作,...这个时候就需要将查询的数据作为一个临时,起别名进行删除啦。

7.1K10
您找到你想要的搜索结果了吗?
是的
没有找到

mysql常用功能之删除重复数据&ab中a存在b不存在的 数据

在开发中,我们有可能会遇到这种情况: 1:删除重复数据 2:AB两通过主键关联,删除A中存在而B中不存在的数据。如下图: ? 这样的怎么解决? 今天遇到一个问题。...相同的数据同一表里出现了多次。我的需求是删除多余的数据,但要保留其中一条。 定义 表明 table_a ,判断唯一的两个字段 c_1,c_2,无关字段data 中原始数据如下 ?...我的思路是:再查询一个id 字段 ,我们group by 的时候 id 字段只能查询到重复数据中的一条。然后我们把这些id的数据删除,就达到了去重的效果。...可以看到有两行被删除了。这时再看看数据数据已经变成了: ? 成功将重复数据删除。 如果重复数据是三条或者更多怎么办呢?很简单,再多执行几次这个SQL 就好了。...2 内容3 7 3 内容1 8 3 内容2 9 3 内容3 现在A删除了某条记录 如何能将B删除A没有的记录.

4K40

MySQL查看数据中的重复记录并删除

数据如下 查看用户名相同的记录 select * from user where username in (select username from user group by username...HAVING count(*) >1); 查看用户名和手机号都相同的重复记录 select * from user where (username,phone) in (select username...删除用户名和手机号都相同的重复记录 DELETE from user where (username,phone) -- 注意:此处一定要加括号,当成联合字段来处理 IN ( --...的记录 SELECT MIN(id) FROM user GROUP BY username,phone HAVING COUNT(1) > 1 ); 上述语句看着是不是应该正常能执行删除掉用户名和手机号都相同的重复记录只保留...实际执行会报如下错误: 1093 - You can’t specify target table ‘user’ for update in FROM clause 含义:不能在同一中查询的数据作为同一的更新数据

10.8K30

Mysql删除数据,文件大小不变

首先明确一个概念,innodb包含两部分,结构定义和数据Mysql8.0以前结构定义存放在.frm为后缀的文件里,而Mysql8.0版本以后允许结构定义放到系统数据中,因为结构定义占用的空间很小...如果放到系统共享空间中,即使删除掉了,空间也就是不会回收的 数据删除流程 ?...我们可以使用下面命令重建,在mysql5.5版本之前,这个命令的执行流程跟我们前面描述的差不多,区别就是这个临时B不需要手动创建,MySql会自动完成转存数据,就换表明,删除旧表的操作 ?...,对业务来说,可以容忍,当然对于大的重建,这个操作是很消耗IO和CPU资源的,生产环境要谨慎执行, Online 和inplace 我们看到第一状态的图是把A的数据导出来放到temp_table...,添加全文索引和空间索引就属于这种情况, 这个说明一个重建的区别 mysql5.6版本开始alter table t engin=innodb(recreate),默认就是第二状态图描述的 analyze

5K10

MySQL | 查找删除重复

如何删除重复行 一个相关的问题是如何删除重复行。一个常见的任务是,重复行只保留一行,其他删除,然后你可以创建适当的索引,防止以后再有重复的行写入数据库。 同样,首先是弄清楚重复行的定义。...本文中,假设要保留的是第一行——id字段具有最小值的行,意味着你要删除其他的行。 也许最简单的方法是通过临时。尤其对于MYSQL,有些限制是不能在一个查询语句中select的同时update一个。...简单起见,这里只用到了临时的方法。 我们的任务是:删除所有重复行,除了分组中id字段具有最小值的行。因此,需要找出大小大于1的分组,以及希望保留的行。你可以使用MIN()函数。...这里的语句是创建临时,以及查找需要用DELETE删除的行。...,你可以开始删除“脏数据”行了。

5.8K30

merge更新或插入同一

一段业务逻辑,需要先判断一条记录在数据库中是否有存在,若存在则更新该记录,若不存在则插入记录。 应用之前的做法是: 1、先用条件判断记录在数据库中的个数。...以上逻辑最差的情况就是需要执行两次SQL,如果数据量不大,则可以忽略消耗时间,但如果是大,可能消耗就会翻倍。针对这种情况,或许可以考虑使用merge。...一般使用merge都是用来将一个数据导入另一个,但他可以对同一操作,例如: 需求:RULE_COLLISION:根据app_name、rule_id和start_time更新collision_count...then      insert values (t2.app_name, t2.MODULE, t2.RULE_ID, t2.COLLISION_COUNT, t2.start_time); 通过伪dual...,实现RULE_COLLISION的自我更新或插入,这种做法和上面逻辑都是相同的,但这样只会执行一次SQL,如下是执行计划: Execution Plan -------------------

1.2K40
领券