MySQL

一、报错

数据插入时报重复键错误

  1. ERROR 1062 (23000): Duplicate entry '2147483647' for key 'PRIMARY'

表名和数据都是采用测试数,结果和生产的现象是一致的

二、分析

测试环境为percona server 5.7.20。首先查看表数据和表结构,结果如下

  1. mysql> select * from t2 order by id desc limit 3;
  2. +------------+------+------+
  3. | id | c1 | c2 |
  4. +------------+------+------+
  5. | 2147483647 | 101 | 101 |
  6. | 100 | 100 | 100 |
  7. | 4 | 4 | 4 |
  8. +------------+------+------+
  9. 3 rows in set (0.00 sec)
  10. mysql> show create table t2\G
  11. *************************** 1. row ***************************
  12. Table: t2
  13. Create Table: CREATE TABLE `t2` (
  14. `id` int(11) NOT NULL AUTO_INCREMENT,
  15. `c1` int(11) DEFAULT NULL,
  16. `c2` int(11) DEFAULT NULL,
  17. PRIMARY KEY (`id`),
  18. UNIQUE KEY `uniq_c1` (`c1`)
  19. ) ENGINE=InnoDB AUTO_INCREMENT=2147483647 DEFAULT CHARSET=utf8mb4
  20. 1 row in set (0.00 sec)

可以发现,其中id 是有符号的int,已经达到了int的最大值,但是这个表没有相应的时间字段来记录这个id=2147483647 的记录是何时插入或者更新的。把时间点之前的binlog 捞了下,都没找到有id=2147483647的插入记录。查找DDL变更记录,只找到了该表其他字段的变更,刚好在这个报错的时间点之前,但是没有修改auto_increment的值。
结合binlog ,终于确认这条记录的具体插入时间。意外的是,这条记录插入的binlog是这样的
insert into t2(id,c1,c2) values(101,101,101) 也就是说,插入的时候的id 是101,并不是 2147483647,那又是为啥呢?
继续解析binlog

  1. update t2 set id=4147483647,c1=101,c2=101 where id=101;

通过dml平台的日志审计功能,发现是误操作把主键更新了,然后溢出,id变成了2147483647
此时,表的ddl 的 auto_increment 还是等于101,并没有变成2147483647。后面的正常业务SQL进行insert产生的id正常产生,因此可以执行成功,直到做了一次DDL,加了一个字段,MySQL重新计算了auto_incremnt的值,变成了2147483647,新插入的SQL的自增值无法继续分配,主键冲突,业务开始报错,才发现了这个定时炸弹。

三、小结

MySQL如果在指定id 进行插入的时候,如果这个id大于表的自增值,那么MySQL会把表的自增值修改为这个id,并加1,但是如果把主键更新成更大的值,MySQL并不会把表的自增值修改为更新后的值,会埋下一颗定时炸弹,在某些情况下,如DDL,重启等之后,业务开始报错,会误认为DDL或者重启导致业务表的插入故障。
该问题在percona 5.6.24 和 percona 5.7.20均有出现,在MySQL 8.0.11 中表现正常。找到BUG发现2005年就有被提出,因为性能原因以及场景很少没有被修复。