主页 / 问题 / 595072
Accepted
Jean-Claude
Asked:2020-11-24 02:49:58 +0000 UTC2020-11-24 02:49:58 +0000 UTC

SQL - 如何删除数据库中的重复记录？

  • 772

有这样一张大象状态表，即一头大象所在位置可以有几种状态。

status:
id int auto_increment pk
slon_id int
status varchar
date datetime

由于软件错误（更准确地说是缺陷），出现了表格的重复记录

1 1 Розовый слон в Африке 18.11.2016...
2 1 Розовый слон в Африке 18.11.2016...
3 1 розовый слон уже в Зимбабве 19.11.2016...
4 2 Зеленый слон в Европе 15.11.2016...

对SQL解决方案感兴趣。有没有办法删除重复的条目？是否可以一次删除重复的条目，以免丢失历史记录？（也就是说，如果有多个关于非洲和粉象的条目，请删除除一个以外的所有条目）。

mysql

3 个回答

  1. Best Answer

    动作算法：

    1. 了解记录应被视为相同的标准
    2. 写一个查询来搜索重复的数据集（不是行，只有数据集）
    3. 弄清楚如何决定保留哪个条目
    4. 相应地调整查询，以便它显示所有重复的记录，除了应该保留的记录
    5. 写一个请求delete where id in (subquery)。

    结果是这样的，如果你考虑uniqfield一个应该变得唯一的字段，留下一个最小值的行id：

    delete from tablename where id in (
    select id from (
        select id from tablename join (
             select min(id) as firstdup, uniqfield
             from tablename
             group by uniqfield
        ) duplicates using(uniqfield)
        where id != firstdup
    ) subqueryhack
)

    对于两个字段的组合，以便您可以看到发生了什么变化

    delete from tablename where id in (
    select id from (
        select id from tablename join (
             select min(id) as firstdup, uniqfield1, uniqfield2
             from tablename
             group by uniqfield1, uniqfield2
        ) duplicates using(uniqfield1, uniqfield2)
        where id != firstdup
    ) subqueryhack
)

    delete inmysql不会让您直接从子查询读取的表中删除，但如果需要，另一个子查询会绕过它。

    如果保留哪些行和删除哪些行并不重要并且DBMS版本允许，那么在mysql 5.7.4之前你可以简单地挂一个唯一索引指示ignore

    ALTER IGNORE TABLE mytable ADD UNIQUE INDEX myindex (A, B, C, D);

    这将删除这些字段的所有重复项，除了一行。在当前版本中，该ignore行为已被删除并导致错误。我不明白他们为什么删除它，很可能是因为不明显的行为，将删除哪一行以及返回到 SQL 标准的一般过程。

    • 9

  2. 这个选项应该有效。TESTTEST应替换为您自己的表名。此查询将为每个条目留下一个slon_id最大日期。

    DELETE FROM TESTTEST WHERE id NOT IN (
    SELECT MAX(id)
    FROM (
        SELECT t.slon_id, MAX(t.[date]) AS [date] 
        FROM TESTTEST t GROUP BY t.slon_id) t
    JOIN TESTTEST t2 ON t.slon_id = t2.slon_id AND t.[date] = t2.[date] 
    GROUP BY t2.id
)
    • 3

  3. 这就是它如何删除该字段中的所有重复项val并留下一个旧的id

    DELETE tab 
FROM tab
INNER JOIN (
    SELECT max(id) as lastId, val
    FROM tab
    GROUP BY val
    HAVING count(*) > 1) dup on dup.val = tab.val
WHERE tab.id < dup.lastId;
    • 0

相关问题