当前位置:首页 » 编程语言 » sql去掉重复列记录
扩展阅读
webinf下怎么引入js 2023-08-31 21:54:13
堡垒机怎么打开web 2023-08-31 21:54:11

sql去掉重复列记录

发布时间: 2022-12-12 01:11:53

① 如何用sql语句去掉重复记录

COL1 中有重复记录(COL1,COL2为主键),如何删除

1、有少数重复记录(在col1,col2上有索引比较好)

DELETE T
WHERE (COL1,COL2) IN
(SELECT COL1,COL2 FROM T GROUP BY COL1,COL2 HAVING COUNT(*) > 1)
AND
ROWID NOT IN
(SELECT MIN(ROWID) FROM T GROUP BY COL1,COL2 HAVING COUNT(*) > 1)

2、大部份记录有重复记录

DELETE T WHERE ROWID NOT IN
(SELECT MIN(ROWID) FROM T GROUP BY COL1,COL2)

3、其他写法

DELETE T WHERE ROWID IN
(SELECT A.ROWID FROM T A,T B
WHERE A.COL1=B.COL1 AND A.COL2 = B.COL2 AND A.ROWID > B.ROWID)

######################################

10. 删除重复记录

最高效的删除重复记录方法 ( 因为使用了ROWID)

DELETE FROM EMP E

WHERE E.ROWID > (SELECT MIN(X.ROWID)

FROM EMP X

WHERE X.EMP_NO = E.EMP_NO);

11. 用TRUNCATE替代DELETE

当删除表中的记录时,在通常情况下, 回滚段(rollback segments ) 用来存放可以被恢复的信息. 如果你没有COMMIT事务,ORACLE会将数据恢复到删除之前的状态(准确地说是

恢复到执行删除命令之前的状况)

而当运用TRUNCATE时, 回滚段不再存放任何可被恢复的信息.当命令运行后,数据不能被恢复.因此很少的资源被调用,执行时间也会很短.

(译者按: TRUNCATE只在删除全表适用,TRUNCATE是DDL不是DML)

12. 尽量多使用COMMIT

只要有可能,在程序中尽量多使用COMMIT, 这样程序的性能得到提高,需求也会因为COMMIT所释放的资源而减少:

COMMIT所释放的资源:

a. 回滚段上用于恢复数据的信息.

b. 被程序语句获得的锁

c. redo log buffer 中的空间

d. ORACLE为管理上述3种资源中的内部花费

② sql中如何删除一个表中重复的记录

sql中删除一个表中的重复记录可以采用如下步骤:

1、把a_dist表的记录用distinct去重,结果放到临时表中。

select distinct * into #temp from a_dist;

2、把a_dist表的记录全部删除。

delete from a_dist;

3、把临时表中的数据信息导进到a_dist表中,并删除临时表。

insert into a_distselect * from #temp;

drop table #temp;

(2)sql去掉重复列记录扩展阅读:

SQL (结构化查询语言)是用于执行查询的语法。在数据库上执行的大部分工作都由 SQL 语句完成。SQL 语言包含用于更新、插入和删除记录的语法。

增删改查指令构成了 SQL 的 DML 部分:

  • SELECT- 从数据库表中获取数据

  • UPDATE- 更新数据库表中的数据

  • DELETE- 从数据库表中删除数据

  • INSERT INTO- 向数据库表中插入数据

③ SQL查询,如何去除重复的记录

首先,先说明一个问题。这样的结果出现,说明系统设计是有问题的。
其次
删除重复数据,你要提供你是什么数据库。
不同数据库会有不同的解决方案。
关键字Distinct
去除重复,如下列SQL,去除Test相同的记录;
1.
select
distinct
Test
from
Table
2.
如果是要删除表中存在的重复记录,那就逻辑处理,如下:
3.
select
Test
from
Table
group
by
Test
having
count(test)>1
4.
先查询存在重复的数据,后面根据条件删除
还有一个更简单的方法可以尝试一下:
select
aid,
count(distinct
uid)
from
表名
group
by
aid
这是sqlserver
的写法。

如图一在数据表中有两个膀胱冲洗重复的记录。

2
可以通过sql语句“select
*from
表名
where
编码
in(select
编码
from
表名
group
by
编码
having
count(1)
>=
2)”来查询出变种所有重复的记录如图二

3
通过sql语句"
delete
from
表名
where
编码
in(select
编码
from
表名
group
by
编码
having
count(1)
>=
2)
and
编码
not
in
(select
max(编码)from
表名
group
by
编码
having
count(1)
>=2)
"来删除重复的记录只保留编码最大的记录

④ SQL查询,如何去除重复的记录

sql查询去除重复值语句x0dx0asql 单表/多表查询去除重复记录x0dx0a单表distinctx0dx0ax0dx0a多表group byx0dx0ax0dx0agroup by 必须放在 order by 和 limit之前,不然会报错x0dx0ax0dx0a************************************************************************************x0dx0ax0dx0a1、查找表中多余的重复记录,重复记录是根据单个字段(peopleId)来判断x0dx0ax0dx0aselect * from peoplex0dx0ax0dx0awhere peopleId in (select peopleId from people group by peopleId having count(peopleId) > 1)x0dx0a2、删除表中多余的重复记录,重复记录是根据单个字段(peopleId)来判断,只留有rowid最小的记录x0dx0ax0dx0adelete from peoplex0dx0awhere peopleId in (select peopleId from people group by peopleId having count(peopleId) > 1)x0dx0aand rowid not in (select min(rowid) from people group by peopleId having count(peopleId )>1)x0dx0a3、查找表中多余的重复记录(多个字段)x0dx0ax0dx0aselect * from vitae ax0dx0awhere (a.peopleId,a.seq) in (select peopleId,seq from vitae group by peopleId,seq having count(*) > 1)x0dx0a4、删除表中多余的重复记录(多个字段),只留有rowid最小的记录x0dx0adelete from vitae ax0dx0awhere (a.peopleId,a.seq) in (select peopleId,seq from vitae group by peopleId,seq having count(*) > 1)x0dx0aand rowid not in (select min(rowid) from vitae group by peopleId,seq having count(*)>1)x0dx0a5、查找表中多余的重复记录(多个字段),不包含rowid最小的记录x0dx0ax0dx0aselect * from vitae ax0dx0awhere (a.peopleId,a.seq) in (select peopleId,seq from vitae group by peopleId,seq having count(*) > 1)x0dx0aand rowid not in (select min(rowid) from vitae group by peopleId,seq having count(*)>

⑤ SQL删除重复列

共享下我所知道的..
1.如果要查找重复的列(具体步骤我就不说了,看sql语句你应该可以明白过程)
select
*
from
表名
where
重复的字段名in
(SELECT
重复的字段名
FROM
表名
group
by
重复的字段名
having
count(1)>1)
2.删除重复的列保留最早插入的那个(使用这种方法必须要有标示字段,你的好像没有)...
DELETE
FROM
表名
WHERE
重复的字段名
in
(SELECT
重复的字段名
FROM
表名
group
by
重复的字段名
having
count(1)>1)
and
你表中的第一个字段
not
in
(select
min(你表中的第一个字段)
from
表名
group
by
重复的字段名
having
count(1)>1)
最后要告诉你的是:看仔细了:
上面的删除方法是不能删除你所要删除的那列,因为你表中的数据没有唯一的标示,建议你从新建张表,设一个自增长字段..这样这张表就不会出现你所遇到的问题了.

⑥ SQL里面如何删除重复的记录

方法1 最简单的方法,拿出唯一的记录集,放入中间表。原表清空,再把数据导回来。数据少的话很快。

select distinct UPPER(Stu_ID),*from tableName


方法2 如果这个表特别大,导表的方法速度受不了的话:

  1. 找出所有重复记录

    1. select * from tableName where Stu_ID_UP in (
      select Stu_ID_UPfrom (select UPPER(Sut_ID) Stu_ID_UP from tableName)
      group by Stu_ID_UP
      having count(Stu_ID_UP) > 1)

  2. 然后人工查看一下这些数据,推测这些重复数据产生的原因,是输入错误、代码逻辑错误、还是业务逻辑错误。要是业务原因,那一定要跟业务部门谈好解决方案,别删完出状况。

  3. 经过第2步的各种确认删除方法后,开始删~

保留rowid最小的记录

delete from tableName a

where (a.Stu_ID) in (

select Stu_ID_UP

from (

select UPPER(Sut_ID) Stu_ID_UP

from tableName)

group by Stu_ID_UP

having count(Stu_ID_UP) > 1)

and rowid not in (select min(rowid)

from (select UPPER(Sut_ID) Stu_ID_UP from tableName)

group by Stu_ID_UP

having count(Stu_ID_UP) > 1)


哎这恶心的排版,这网页里面真难调~~~

⑦ sql中怎么删除两条重复记录并保留一条

将数据去重复后暂存到临时表#a中

selectdistinct*into#afromtable1where条件

deletetable1where删除限制条件

insertintotable1select*from#a-将暂存的数据插回数据库

droptable#a-删除临时表

注:当前的数据库,每一个表都应该有一个标志字段,以保证记录不完全重复,否则实用中极易出问题。

(7)sql去掉重复列记录扩展阅读:

SQL语句删除掉重复的其他情况

1、查找表中多余的重复记录,重复记录是根据单个字段(peopleId)来判断

SELECT

*

FROM

people

WHERE

peopleId IN (

SELECT

peopleId

FROM

people

GROUP BY

peopleId

HAVING

count(peopleId) > 1

)

2、查找表中多余的重复记录(多个字段)

SELECT

*

FROM

vitae a

WHERE

(a.peopleId, a.seq) IN (

SELECT

peopleId,

seq

FROM

vitae

GROUP BY

peopleId,

seq

HAVING

count(*) > 1

)

参考资料来源:结构化查询语言(SQL)-网络

⑧ SQL语句删除重复的记录

删除重复的数据
delete from tb where id not in (
select id from
(select fileSize,fileName ,max(id) id from tb group by filesize,filename ) a
)

现在完成了重复数据的删除,主要是利用了找出某个分组中最大的那个id,其中包括了所有不重复的id,然后使用not in将需要保留的排除。

⑨ 在sql语言中去掉重复值的命令是

distinct。
SQLserver中很明显的去重复的语句是distinct。selectdistinct是去除重复的记录行,count(distinctColumn),消除重复值。还有一些不明显的具有去重功能的词,例如union,会去除重复的记录行或值。

⑩ sql中怎么将重复的记录去掉

方法一按照多条件重复处理:
delete tmp from(
select row_num = row_number() over(partition by 字段,字段 order by 时间 desc)
from 表 where 时间> getdate()-1
) tmp
where row_num > 1

方法二按照单一条件进行去重:
delete from 表 where 主键ID not in(
select max(主键ID) from 表 group by 需要去重的字段 having count(需要去重的字段)>=1
)

注意:为提高效率如上两个方法都可以使用临时表, not in 中的表可以先提取临时表#tmp,
然后采用not exists来执行,为避免数量过大,可批量用Top控制删除量
delete top(2) from 表
where not exists (select 主键ID
from #tmp where #tmp.主键ID=表.主键ID)