mysql去掉重复值的实例分享

发布时间:2019-10-25编辑:脚本学堂
mysql中有大量的重复数据,如何快速去除这些重复值呢?本文分享下我的操作过程,有需要的朋友,可以参考下。

说到去除数据库中的重复值,大家多会想到用distinct,本文不用这种方法也是可以去除重复数据的。

例子:
 

复制代码 代码示例:
表 table
id name
1 a
2 b
3 c
4 c
5 b
 

比如,想用一条语句查询得到name不重复的所有数据,那就必须使用distinct去掉多余的重复记录
 

复制代码 代码示例:
select distinct name from table
 

结果:
 

name
a
b
c
 

如果想要得到的是id值呢?改一下查询语句:
 

复制代码 代码示例:
select distinct name, id from table
 

结果:
 

id name
1 a
2 b
3 c
4 c
5 b
 

distinct怎么没起作用?作用是起了的,不过他同时作用了两个字段,也就是必须得id与name都相同的才会被排除。
再改改查询语句:
 

复制代码 代码示例:
select id, distinct name from table
 

不过这次除了错误信息你什么也得不到,distinct必须放在开头。难到不能把distinct放到where条件里?能,照样报错。

mysql/ target=_blank class=infotextkey>mysql手册里找到一个用法,用group_concat(distinct name)配合group by name实现。
结果还是报错。

经仔细确认,group_concat函数是4.1以上版本才支持的,看来只能升级下我的mysql4.0了,版本实在是太低了。

既然可以使用group_concat函数,那其它函数能行吗?
赶紧用count函数一试,成功。

完整语句:
 

复制代码 代码示例:
select *, count(distinct name) from table group by name
 

结果:
 

id name count(distinct name)
1 a 1
2 b 1
3 c 1
 

最后一项是多余的,可以无视。
另外,group by 必须放在 order by 和 limit之前,不然会报错。