从包含数百万条记录的表中删除

Question

我试图找到一种方法在InnoDB表上进行条件DELETE,其中包含数百万条记录,而不会锁定它(因此不会使网站失效).

我试图在mysql.com上找到相关信息,但无济于事.关于如何进行的任何提示？

Answer 1

我不认为没有锁定就可以删除.也就是说,我不认为锁定您要删除的记录是一个问题.什么是问题是锁定其他行.

我在这里找到了关于该主题的一些信息:http://dev.mysql.com/doc/refman/5.0/en/innodb-locks-set.html

我建议的是尝试做一百万次单行删除.我认为如果你在一次交易中做所有这些,性能不应该太大.所以你会得到类似的东西:

START TRANSACTION;

DELETE FROM tab WHERE id = 1;
..
..
DELETE FROM tab WHERE id = x;

COMMIT;

您可以通过执行类似的操作来生成所需的语句

SELECT CONCAT('DELETE FROM tab WHERE id = ', id)
FROM   tab
WHERE  <some intricate condition that selects the set you want to delete>

所以优于这种方法而不是做:

DELETE FROM tab 
WHERE  <some intricate condition that selects the set you want to delete>

在第一种方法中,您只能锁定要删除的记录,而在第二种方法中,您可能会遇到锁定其他记录的风险,这些记录恰好与您要删除的行在同一范围内.

Answer 2

如果它适合您的应用程序,则可以限制要删除的行数,并设置cronjob以重复删除.例如:

DELETE FROM tab WHERE .. LIMIT 1000

我发现在类似的场景中这是一个很好的妥协.