- 积分
- 2054
- UID
- 5543
- 阅读权限
- 100
- 注册时间
- 2010-6-21
- 精华
- 在线时间
- 小时
- 最后登录
- 1970-1-1
- 职业
- 1
|
因为某个表多了一些重复数据,导致无法使用insert into on duplicate key语句进行快速插入/更新
所以需要先清理掉无效数据。
我清理了下列语句在mysql5.6上清理了一下,感觉可以性能可以接受。也就是几分钟的事了。
DELETE FROM table1
WHERE ID NOT IN (SELECT ID FROM (select MAX(ID) ID from table1 GROUP BY C1,C2,C3,C4) TA );
结果,用户现场用的是mysql5.5版本,60分钟之后。语句还没有处理完。
用户直接爆掉。要求停止清理。要求与我们调查问题原因,并给出详细的解决方案,我们一脸懵。
结果发现 select MAX(ID) ID from table1 GROUP BY C1,C2,C3,C4) TA 就会10分钟以上。而且是在服务器的机器上运行。如果配置再查些,时间更不可控制了。
这块与mysql的实现有关系。mysql5.5 没有优化这种嵌套循环的逻辑,mysql5.6优化了嵌套循环的逻辑。
请大家的注意。
|
|