使用PostgreSQL查找重复的行

我们有一张带有以下各列的照片表：

id, merchant_id, url 

该表包含该组合的重复值merchant_id, url。因此一行可能会出现多次。

234 some_merchant  http://www.some-image-url.com/abscde1213
235 some_merchant  http://www.some-image-url.com/abscde1213
236 some_merchant  http://www.some-image-url.com/abscde1213

删除这些重复项的最佳方法是什么？（我使用PostgreSQL 9.2和Rails3。）

这是我的看法。

select * from (
  SELECT id,
  ROW_NUMBER() OVER(PARTITION BY merchant_Id, url ORDER BY id asc) AS Row
  FROM Photos
) dups
where 
dups.Row > 1

通过定制要删除的记录以符合规范，可以随意处理订单。

SQL提琴=> http://sqlfiddle.com/#!15/d6941/1/0

不再支持Postgres 9.2的SQL Fiddle。将SQL Fiddle更新到Postgres 9.3

sgeddes的答案的第二部分不适用于Postgres（小提琴使用MySQL）。这是他使用Postgres的答案的更新版本：http ://sqlfiddle.com/#!12/ 6b1a7/1

DELETE FROM Photos AS P1  
USING Photos AS P2
WHERE P1.id > P2.id
   AND P1.merchant_id = P2.merchant_id  
   AND P1.url = P2.url;  

我为您提供了两种选择。

快速的操作方法如下：（假设您的ID列不是唯一的，因为您多次提到234次）：

CREATE TABLE tmpPhotos AS SELECT DISTINCT * FROM Photos;
DROP TABLE Photos;
ALTER TABLE tmpPhotos RENAME TO Photos;

这是SQL Fiddle。

如果有约束，则需要将约束添加回表中。

如果您的ID列是唯一的，则可以执行以下操作以保持最低ID：

DELETE FROM P1  
USING Photos P1, Photos P2
WHERE P1.id > P2.id
   AND P1.merchant_id = P2.merchant_id  
   AND P1.url = P2.url;  

和小提琴。