удалить дубликаты записей, сохранить один

Question

У меня есть временная таблица, созданная из файла copy из файла CSV, и результат включает в себя некоторые дубликаты идентификаторов. Мне нужно удалить любое дублирование. Я пробовал следующее:

delete from my_table where id in 
    (select id from (select count(*) as count, id 
     from my_table group by id) as counts where count>1); 

Однако это удаляет как дубликаты записей, так и я должен их хранить.

Как удалить только вторую запись с дублированным идентификатором?

Спасибо.

Answer 1

В вашем запросе удаляются все идентификаторы с числом больше 1, поэтому он удаляет все, что дублируется. Что вам нужно сделать, это выделить одну запись из списка дубликатов и сохранить это:

delete 
from my_table 
where id in  (select id 
        from  my_table 
        where some_field in (select some_field 
              from  my_table 
              group by some_field 
              having count(id) > 1)) 
and id not in (select min(id) 
        from  my_table 
        where some_field in (select some_field 
              from  my_table 
              group by some_field 
              having count(id) > 1) 
        group by some_field); 

EDIT Исправлено: P

Answer 2

Предполагая, что у вас нет внешнего ключа отношения ...

CREATE TABLE "temp"(*column definitions*); 

insert into "temp" (*column definitions*) 
select *column definitions* 
from (
     select *,row_number() over(PARTITION BY id) as rn from "yourtable" 
) tm 
where rn=1; 

drop table "yourtable"; 

alter table "temp" rename to "yourtable";