『壹』 Oracle中如何刪除重復數據
我們可能會出現這種情況,某個表原來設計不周全,導致表裡面的數據數據重復,那麼,如何對重復的數據進行刪除呢? 重復的數據可能有這樣兩種情況,第一種時表中只有某些欄位一樣,第二種是兩行記錄完全一樣。 一、對於部分欄位重復數據的刪除 先來談談如何查詢重復的數據吧。 下面語句可以查詢出那些數據是重復的: select 欄位1,欄位2,count(*) from 表名 group by 欄位1,欄位2 having count(*) > 1 將上面的>號改為=號就可以查詢出沒有重復的數據了。 想要刪除這些重復的數據,可以使用下面語句進行刪除 delete from 表名 a where 欄位1,欄位2 in (select 欄位1,欄位2,count(*) from 表名 group by 欄位1,欄位2 having count(*) > 1) 上面的語句非常簡單,就是將查詢到的數據刪除掉。不過這種刪除執行的效率非常低,對於大數據量來說,可能會將資料庫弔死。所以我建議先將查詢到的重復的數據插入到一個臨時表中,然後對進行刪除,這樣,執行刪除的時候就不用再進行一次查詢了。如下: CREATE TABLE 臨時表 AS (select 欄位1,欄位2,count(*) from 表名 group by 欄位1,欄位2 having count(*) > 1) 上面這句話就是建立了臨時表,並將查詢到的數據插入其中。 下面就可以進行這樣的刪除操作了: delete from 表名 a where 欄位1,欄位2 in (select 欄位1,欄位2 from 臨時表); 這種先建臨時表再進行刪除的操作要比直接用一條語句進行刪除要高效得多。 這個時候,大家可能會跳出來說,什麼?你叫我們執行這種語句,那不是把所有重復的全都刪除嗎?而我們想保留重復數據中最新的一條記錄啊!大家不要急,下面我就講一下如何進行這種操作。 在oracle中,有個隱藏了自動rowid,裡面給每條記錄一個唯一的rowid,我們如果想保留最新的一條記錄, 我們就可以利用這個欄位,保留重復數據中rowid最大的一條記錄就可以了。 下面是查詢重復數據的一個例子: select a.rowid,a.* from 表名 a where a.rowid != ( select max(b.rowid) from 表名 b where a.欄位1 = b.欄位1 and a.欄位2 = b.欄位2 ) 下面我就來講解一下,上面括弧中的語句是查詢出重復數據中rowid最大的一條記錄。 而外面就是查詢出除了rowid最大之外的其他重復的數據了。 由此,我們要刪除重復數據,只保留最新的一條數據,就可以這樣寫了: delete from 表名 a where a.rowid != ( select max(b.rowid) from 表名 b where a.欄位1 = b.欄位1 and a.欄位2 = b.欄位2 ) 隨便說一下,上面語句的執行效率是很低的,可以考慮建立臨時表,講需要判斷重復的欄位、rowid插入臨時表中,然後刪除的時候在進行比較。 create table 臨時表 as select a.欄位1,a.欄位2,MAX(a.ROWID) dataid from 正式表 a GROUP BY a.欄位1,a.欄位2; delete from 表名 a where a.rowid != ( select b.dataid from 臨時表 b where a.欄位1 = b.欄位1 and a.欄位2 = b.欄位2 ); commit; 二、對於完全重復記錄的刪除 對於表中兩行記錄完全一樣的情況,可以用下面語句獲取到去掉重復數據後的記錄: select distinct * from 表名 可以將查詢的記錄放到臨時表中,然後再將原來的表記錄刪除,最後將臨時表的數據導回原來的表中。如下: CREATE TABLE 臨時表 AS (select distinct * from 表名); drop table 正式表; insert into 正式表 (select * from 臨時表); drop table 臨時表; 如果想刪除一個表的重復數據,可以先建一個臨時表,將去掉重復數據後的數據導入到臨時表,然後在從 臨時表將數據導入正式表中,如下: INSERT INTO t_table_bak select distinct * from t_table;
『貳』 在ORACLE中如何刪除表中的重復數據
方法很多:
新建臨時表,將原始數據使用distinct或者分組之後,生成獨立數據到臨時表中。清空原始表,將臨時表導入原始表。
創建動態游標,找到所有重復數據,重復執行刪除,直到重復數據刪除完畢。
以上方法僅供參考。
『叄』 oracle資料庫怎麼刪除重復數據啊
用這種效率最高的就可以
比如,某個表要按照id和name重復,就算重復數據
delete from 表名 where rowid not in (select min(rowid) from 表名 group by id,name);
commit;如果以id,name和grade重復算作重復數據
delete from 表名 where rowid not in (select min(rowid) from 表名 group by id,name,grade);
commit;注意:min也可用max替代
『肆』 如何刪除oracle資料庫中的重復記錄
查詢及刪除重復記錄的sql語句
1、查找表中多餘的重復記錄,重復記錄是根據單個欄位(Id)來判斷 ;
select * from 表 where Id in (select Id from 表 group byId having count(Id) > 1)
2、刪除表中多餘的重復記錄,重復記錄是根據單個欄位(Id)來判斷,只留有rowid最小的記錄;
DELETE from 表 WHERE (id) IN ( SELECT id FROM 表 GROUP BY id HAVING COUNT(id) > 1) AND ROWID NOT IN (SELECT MIN(ROWID) FROM 表 GROUP BY id HAVING COUNT(*) > 1);
3、查找表中多餘的重復記錄(多個欄位);
select * from 表 a where (a.Id,a.seq) in(select Id,seq from 表 group by Id,seq having count(*) > 1)
4、刪除表中多餘的重復記錄(多個欄位),只留有rowid最小的記錄;
delete from 表 a where (a.Id,a.seq) in (select Id,seq from 表 group by Id,seq having count(*) > 1) and rowid not in (select min(rowid) from 表 group by Id,seq having count(*)>1)
5、查找表中多餘的重復記錄(多個欄位),不包含rowid最小的記錄;
select * from 表 a where (a.Id,a.seq) in (select Id,seq from 表 group by Id,seq having count(*) > 1) and rowid not in (select min(rowid) from 表 group by Id,seq having count(*)>1)
『伍』 oracle刪除重復的行怎麼刪啊
可用rowid來刪除。
如表中有如下數據:
由圖可知,目前NAME列中,badkano與網路知道團長都有重復的內容,目前要保留其中的一條badkano和一條網路知道團長的數據,可用如下語句:
deletefromtestwhererowidnotin(selectmin(rowid)fromtestgroupbyname);
commit;
執行後結果,表名多餘的內容已經刪除。
注意事項:delete語句執行後,需要commit提交,否則只在當前session下有效。
『陸』 Oracle資料庫重復數據刪除的幾種方法
重復的數據可能有這樣兩種情況,第一種時表中只有某些欄位一樣,第二種是兩行記錄完全一樣。Oracle資料庫重復數據刪除技術有如下優勢:更大的備份容量、數據能得到持續驗證、有更高的數據恢復服務水平、方便實現備份數據的容災。 一、刪除部分欄位重復數據先來談談如何查詢重復的數據吧。 下面語句可以查詢出那些數據是重復的: select 欄位1,欄位2,count(*) from 表名 group by 欄位1,欄位2 having count(*) > 1 將上面的>號改為=號就可以查詢出沒有重復的數據了。 想要刪除這些重復的數據,可以使用下面語句進行刪除 delete from 表名 a where 欄位1,欄位2 in (select 欄位1,欄位2,count(*) from 表名 group by 欄位1,欄位2 having count(*) > 1) 上面的語句非常簡單,就是將查詢到的數據刪除掉。不過這種刪除執行的效率非常低,對於大數據量來說,可能會將資料庫弔死。所以我建議先將查詢到的重復的數據插入到一個臨時表中,然後對進行刪除,這樣,執行刪除的時候就不用再進行一次查詢了。如下: CREATE TABLE 臨時表 AS (select 欄位1,欄位2,count(*) from 表名 group by 欄位1,欄位2 having count(*) > 1) 上面這句話就是建立了臨時表,並將查詢到的數據插入其中。 下面就可以進行這樣的刪除操作了: delete from 表名 a where 欄位1,欄位2 in (select 欄位1,欄位2 from 臨時表); 這種先建臨時表再進行刪除的操作要比直接用一條語句進行刪除要高效得多。 這個時候,大家可能會跳出來說,什麼?你叫我
『柒』 oracle資料庫表中某幾個欄位的重復數據去重
select testid,count(1) from testtable group by testid having count(1)>1
count(1)就是重復在數量
如何查詢重復的數據
select 欄位1,欄位2,count(*) from 表名 group by 欄位1,欄位2 having count(*) > 1
PS:將上面的>號改為=號就可以查詢出沒有重復的數據了。
Oracle刪除重復數據的SQL(刪除所有):
刪除重復數據的基本結構寫法:
想要刪除這些重復的數據,可以使用下面語句進行刪除
delete from 表名 a where 欄位1,欄位2 in(select 欄位1,欄位2,count(*) from 表名 group by 欄位1,欄位2 having count(*) > 1)
上面的SQL注意:語句非常簡單,就是將查詢到的數據刪除掉。不過這種刪除執行的效率非常低,對於大數據量來說,可能會將資料庫弔死。
建議先將查詢到的重復的數據插入到一個臨時表中,然後對進行刪除,這樣,執行刪除的時候就不用再進行一次查詢了。如下:
CREATE TABLE 臨時表 AS (select 欄位1,欄位2,count(*) from 表名 group by 欄位1,欄位2 having count(*) > 1)
上面這句話就是建立了臨時表,並將查詢到的數據插入其中。
下面就可以進行這樣的刪除操作了:
delete from 表名 a where 欄位1,欄位2 in (select 欄位1,欄位2 from 臨時表);
『捌』 oracle資料庫中怎樣刪除一個表的重復數據
這個問題就是要刪除表中重復的記錄,查詢的sql語句如下:
select id,name from (
select id,name,row_numer() over(partition by id,name order by id,name) rn from tableA)
where rn>1;
刪除的sql語句如下:
DELETE tableA WHERE ROWNUM = (SELECT ROWNUM
FROM (SELECT id,name,
ROW_NUMBER() OVER(PARTITION BY id,name ORDER BY id,name) RN
FROM tableA )
WHERE RN > 1);
『玖』 如何解決Oracle資料庫中重復數據的方法步驟
在平時的開發中,我們經常遇到數據表中出現重復的數據,那麼該如何解決呢?這里介紹兩種情況下的數據去重方法,一、完全重復數據去重;二、部分欄位數據重復去重。
一、完全重復數據去重方法
對於表中完全重復數據去重,可以採用以下SQL語句。
Code
CREATETABLE"#temp"AS (SELECTDISTINCT * FROM 表名);--創建臨時表,並把DISTINCT 去重後的數據插入到臨時表中
truncateTABLE 表名;--清空原表數據
INSERTINTO 表名(SELECT * FROM"#temp");--將臨時表數據插入到原表中
DROPTABLE"#temp";--刪除臨時表
具體思路是,首先創建一個臨時表,然後將DISTINCT之後的表數據插入到這個臨時表中;然後清空原表數據;再講臨時表中的數據插入到原表中;最後刪除臨時表。
二、部分數據去重方法
首先查找重復數據
select 欄位1,欄位2,count(*) from 表名 groupby 欄位1,欄位2 havingcount(*) > 1
將上面的>號改為=號就可以查詢出沒有重復的數據了。
想要刪除這些重復的數據,可以使用下面語句進行刪除:
deletefrom 表名 a where 欄位1,欄位2 in
(select 欄位1,欄位2,count(*) from 表名 groupby 欄位1,欄位2 havingcount(*) > 1)
上面的語句非常簡單,就是將查詢到的數據刪除掉。不過這種刪除執行的效率非常低,對於大數據量來說,可能會將資料庫卡死。
基於上述情況,可以先將查詢到的重復的數據插入到一個臨時表中,然後對進行刪除,這樣,執行刪除的時候就不用再進行一次查詢了。如下:
CREATETABLE 臨時表 AS
(select 欄位1,欄位2,count(*) from 表名 groupby 欄位1,欄位2 havingcount(*) > 1)
下面就可以進行這樣的刪除操作了:
deletefrom 表名 a where 欄位1,欄位2 in (select 欄位1,欄位2 from 臨時表);
先建臨時表再進行刪除的操作要比直接用一條語句進行刪除要高效得多。
上面的語句會把所有重復的全都刪除,在oracle中,有個隱藏了自動rowid,裡面給每條記錄一個唯一的rowid,我們如果想保留最新的一條記錄,我們就可以利用這個欄位,保留重復數據中rowid最大的一條記錄就可以了。
下面是查詢重復數據的一個例子:
select a.rowid,a.* from 表名 a
where a.rowid !=
(
selectmax(b.rowid) from 表名 b
where a.欄位1 = b.欄位1 and
a.欄位2 = b.欄位2
)
上面括弧中的語句是查詢出重復數據中rowid最大的一條記錄。而外面就是查詢出除了rowid最大之外的其他重復的數據了。
由此,我們要刪除重復數據,只保留最新的一條數據,就可以這樣寫了:
deletefrom 表名 a
where a.rowid !=
(
selectmax(b.rowid) from 表名 b
where a.欄位1 = b.欄位1 and
a.欄位2 = b.欄位2
)
同理,上述代碼的執行效率畢竟低,所以我們可以考慮建立臨時表,將需要判斷重復的欄位、rowid插入臨時表中,然後刪除的時候在進行比較。
createtable 臨時表 as
select a.欄位1,a.欄位2,MAX(a.ROWID) dataid from 正式表 a GROUPBY a.欄位1,a.欄位2;
deletefrom 表名 a
where a.rowid !=
(
select b.dataid from 臨時表 b
where a.欄位1 = b.欄位1 and
a.欄位2 = b.欄位2
);
commit;