SQL去除重复删除重复数据(高效)

MYSQL里有五百万数据,但大多是重复的,真实的就180万,于是想怎样把这些重复的数据搞出来,在网上找了一圈,好多是用NOT IN这样的代码,这样效率很低,自己琢磨组合了一下,找到一个高效的处理方式,用这个方式,五百万数据,十来分钟就全部去除重复了,请各位参考。

直接创建一个新表,加上唯一索引,然后insert ignore插入新表。

你可能感兴趣的:(SQL去除重复删除重复数据(高效))