Как удалить повторяющиеся строки

Question

Некоторые строки имеют одинаковые первичные ключи (ID), но остальная часть строки может отличаться. Например,

ID Age Info 
2 21 2763 
2 21 6276 
3 31 82756 

В этом случае как первая, так и вторая строки имеют одинаковый идентификатор и возраст, но разные данные. То, что я хочу делать с повторяющимися строками идентификаторов, - это случайное сохранение одного из них и удаление других. У меня так много таких записей в моих наборах данных, поэтому я не могу их удалять один за другим. Есть ли какие-либо решения? Благодаря

Answer 1

Я думаю, что вы ищете что-то вроде этого:

delete from TableName where info not in 
(select min(info) from TableName group by ID,Age); 

попробовать отборное заявление первого, чтобы убедиться, что возвращается правильные строки добавьте удаления части к нему

Answer 2

Попробуйте это:

DELETE t1 
FROM mytable AS t1 
INNER JOIN mytable AS t2 
ON t1.ID = t2.ID AND t1.Age = t2.Age AND t1.Info > t2.Info 

Вышеупомянутый должен работать в MySQL, SQL Server. Оператор удаляет все строки в (ID, Age) фрагменте , но тот, который имеет наименьшее значение Info.

Примечание: Вышеуказанные работы при условии, что значения Info являются уникальными для (ID, Age) среза.

Answer 3

Я бы предложил решение на основе набора, но я не мог позаботиться о строках, в которых все 3 строки идентичны. Поэтому предлагая решение, которое использует ROWCOUNT и цикл while. ROWCOUNT гарантирует, что только одна запись будет удалена за раз. Цикл while так, что вам не нужно делать это вручную один за другим.

SET ROWCOUNT 1 

DECLARE @ctr INT 
SELECT TOP 1 @ctr = COUNT(*) FROM table GROUP BY ID HAVING COUNT(*) > 1 ORDER BY COUNT(*) desc 
SELECT @ctr 
WHILE @ctr > 1 
BEGIN 
    DELETE FROM table WHERE ID IN (SELECT ID FROM table GROUP BY ID HAVING COUNT(*) > 1) 
    SELECT @ctr = NULL 
    SELECT TOP 1 @ctr = COUNT(*) FROM table GROUP BY ID HAVING COUNT(*) > 1 ORDER BY COUNT(*) desc 
If @Ctr IS NULL 
    Break 
ELSE 
    Continue 
END 
SET ROWCOUNT 0 

Вы можете изменить порядок заказа в заявлении об удалении в соответствии с вашими требованиями.

Answer 4

С функцией окна:

;with cte as(select *, row_number() over(partition by id order by info) rn 
      from table) 
delete from cte where rn <> 1