海量数据（百万以上），其中有些全部字段都相同，有些部分字段相同，怎样高效去除重复？
如果要删除手机(mobilePhone)，电话(officePhone)，邮件(email)同时都相同的数据，以前一直使用这条语句进行去重：
delete from 表 where id not in
(select max(id) from 表 group by mobilePhone,officePhone,email )
or
delete from 表 where id not in
(select
下面先来看看例子：
table表
字段1 字段2 id name 1 a 2 b 3 c 4 c 5 b
库结构大概这样，这只是一个简单的例子，实际情况会复杂得多。
比如我想用一条语句查询得到name不重复的所有数据，那就必须
使用distinct去掉多余的重复记录。
select distinct name from table得到的结果是:
——
还是先上代码吧 ，可以先看 SQL语句去掉重复记录，获取重复记录 代码如下: ALTER procedure [dbo].[PROC_ITEMMASTER_GETUNIQUE] PAGEINDEX INT,uid int,itemnumber varchar(50) AS begin tran –开始事务 drop table [ItemMaster].[dbo].[testim] –删除表 –把不重复记录转存到testim中 select * into [ItemMaster].[dbo].[
SQL语句去掉重复记录，获取重复记录 –查询一个表中有效去掉重复的记录，UserID为自增长主键，RoleID为重复字段 SELECT MIN(UserID) AS UserID, RoleID FROM tmpTable GROUP BY RoleID SELECT RoleID FROM tmpTable GROUP BY RoleID HAVING (COUNT(*) > 1) SELECT DISTINCT * FROM tmpTable sql语句查询 sql server a
