查詢及刪除重複記錄的SQL語句

來源:互聯網
上載者:User
關鍵字 網路程式設計 資料庫綜合

查詢及刪除重複記錄的sql語句

(一)
比方說
在a表中存在一個欄位"name",
而且不同記錄之間的"name"值有可能會相同,
現在就是需要查詢出在該表中的各記錄之間,"name"值存在重複的項;

select name,count(*) from a group by name having count(*) > 1
如果還查性別也相同大則如下:
select name,sex,count(*) from a group by name,sex having count(*) > 1


(二)
方法一

declare @max integer,@id integer
declare cur_rows cursor local for select 主欄位,count(*) from 表名 group by 主欄位 having count(*) >; 1
open cur_rows
fetch cur_rows into @id,@max
while @@fetch_status=0
begin
select @max = @max -1
set rowcount @max
delete from 表名 where 主欄位 = @id
fetch cur_rows into @id,@max
end
close cur_rows
set rowcount 0 方法三

上的重複記錄,一是完全重複的記錄,也即所有欄位均重複的記錄,二是部分關鍵字段重複的記錄,比如name欄位重複,而其他欄位不一定重複或都重複可以忽略。
1、對於第一種重複,比較容易解決,使用
select distinct * from tablename
就可以得到無重複記錄的結果集。
如果該表需要刪除重複的記錄(重複記錄保留1條),可以按以下方法刪除
select distinct * into #tmp from tablename
drop table tablename
select * into tablename from #tmp
drop table #tmp
發生這種重複的原因是表設計不周產生的,增加唯一索引列即可解決。
2、這類重複問題通常要求保留重複記錄中的第一條記錄,操作方法如下
假設有重複的欄位為name,address,要求得到這兩個欄位唯一的結果集
select identity(int,1,1) as autoid, * into #tmp from tablename
select min(autoid) as autoid into #tmp2 from #tmp group by name,autoid
select * from #tmp where autoid in(select autoid from #tmp2)
最後一個select即得到了name,address不重複的結果集(但多了一個autoid欄位,實際寫時可以寫在select子句中省去此列)

方法四
查詢重複
select * from tablename where id in (
select id from tablename
group by id
having count(id) > 1
)

sql有一段時間了,發現在我建了一個用來測試的表(沒有建索引)中出現了許多的重複記錄。 後來總結了一些刪除重複記錄的方法,在oracle中,可以通過唯一rowid實現刪除重複記錄;還可以建臨時表來實現... 這個只提到其中的幾種簡單實用的方法,希望可以和大家分享(以表employee為例)。

sql> desc employee

name null  type
----------------------------------------- -------- ------------------

emp_id number(10)
emp_name Varchar2(20)

salary number(10,2)

可以通過下面的語句查詢重複的記錄:

sql> select * from employee;


emp_id emp_name salary

---------- ---------------------------------------- ----------

1 sunshine 10000

1 sunshine 10000

2 semon 20000

2 semon 20000

3 xyz 30000

2 semon 20000

sql> select distinct * from employee;

emp_id emp_name salary

---------- ---------------------------------------- ----------

1 sunshine 10000

2 semon 20000

3 xyz 30000

sql> select * from employee group by emp_id,emp_name,salary having count (*)>1

emp_id emp_name salary

---------- ---------------------------------------- ----------

1 sunshine 10000

2 semon 20000


sql> select * from employee e1

where rowid in (select max(rowid) from employe e2
where e1.emp_id=e2.emp_id and

e1.emp_name=e2.emp_name and e1.salary=e2.salary);


emp_id emp_name salary

---------- ---------------------------------------- ----------

1 sunshine 10000

3 xyz 30000

2 semon 20000

補充

1、查閱資料表中多餘的重複記錄,重複記錄是根據單個欄位(peopleid)來判斷
select * from people
where peopleid in (select peopleid from people grou p by peopleid having count(peopleid) > 1)
2、刪除表中多餘的重複記錄,重複記錄是根據單個欄位(peopleid)來判斷,只留有rowid最小的記錄
delete from people
where peopleid in (select peopleid from people group by peopleid having count(peopleid) > 1)
and rowid n ot in (select min(rowid) from people group by peopleid having count(peopleid )>1)
3、查閱資料表中多餘的重複記錄(多個欄位)
select * from vitae a
where (a.peopleid,a.seq) in (select peopleid,seq from vitae group by peopleid,seq having count(*) > 1)
4、刪除表中多餘的重複記錄(多個欄位),只留有rowid最小的記錄
delete from vitae a
where (a.peopleid,a.seq) in (select peopleid,seq from v itae group by peopleid,seq having count(*) > 1)
and rowid not in (select min(rowid) from vitae group by peopleid,se q having count(*)>1)

5、查閱資料表中多餘的重複記錄(多個欄位),不包含rowid最小的記錄
select * from vitae a
where (a.peopleid,a.seq) in (select peopleid,seq from v itae group by peopleid,seq having count(*) > 1)

相關文章

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.