先通过程序查询出来,然后插入历史表,再删除原表 使用insert into select让数据库IO来完成所有操作 第一个方案使用的时候发现一次性全部加载,系统直接就OOM了,但是分批次做就过多io和时间长,于是选用了第二种方案,测试的时候没有任何问题,开开心心上线,然后被开除。 到底发生了啥,我们复盘一下 先来看第一个方案,...
使用 insert into tablA select * from tableB 语句时，一定要确保 tableB 后面的 where，order 或者其他条件，都需要有对应的索引，来避免出现 tableB 全部记录被锁定的情况。
先通过程序查询出来,然后插入历史表,再删除原表 使用insert into select让数据库IO来完成所有操作 第一个方案使用的时候发现一次性全部加载,系统直接就OOM了,但是分批次做就过多io和时间长,于是选用了第二种方案,测试的时候没有任何问题,开开心心上线,然后被开除。 到底发生了啥,我们复盘一下 先来看第一个方案,...
先通过程序查询出来,然后插入历史表,再删除原表 使用insert into select让数据库IO来完成所有操作 第一个方案使用的时候发现一次性全部加载,系统直接就OOM了,但是分批次做就过多io和时间长,于是选用了第二种方案,测试的时候没有任何问题,开开心心上线,然后被开除。 2到底发生了啥,我们复盘一下 先来看第一个方案...
在默认的事务隔离级别下:insert into order_record select * from order_today加锁规则是:order_record表锁,order_today逐步锁(扫描一个锁一个)。 分析执行过程。 通过观察迁移sql的执行情况你会发现order_today是全表扫描,也就意味着在执行insert into select from语句时,mysql会从上到下扫描order_today内的记录...
血一般的教训,请慎用 insert into select。同事应用之后,导致公司损失了近10w元,最终被公司开除。 事情的起因 公司的交易量比较大,使用的数据库是mysql,每天的增量差不多在百万左右,公司并没有分库分表,所以想维持这个表的性能只能考虑做数据迁移。 同事李某接到了这个任务,于是他想出了这两个方案 ...
血一般的教训,请慎用 insert into select。同事应用之后,导致公司损失了近 10w 元,最终被公司开除。 事情的起因 公司的交易量比较大,使用的数据库是 MySQL,每天的增量差不多在百万左右,公司并没有分库分表,所以想维持这个表的性能只能考虑做数据迁移。 同事李某接到
Insert into select 请慎用,同事因为使用了 Insert into select 语句引发了重大生产事故,最后被开除。某天 xxx 接到一个需求,需要将表 A 的数据迁移到表 B 中去做一个备份。他本想通过程序先查询查出来然后批量插入,但 xxx 觉得这样有点慢,需要耗费大量的网络 I/O,决定采取别的方法进行实现。
血一般的教训,请慎用 insert into select。同事应用之后,导致公司损失了近 10w 元,最终被公司开除。事情的起因 公司的交易量比较大,使用的数据库是 MySQL,每天的增量差不多在百万左右,公司并没有分库分表,所以想维持这个表的性能只能考虑做数据迁移。
在默认的事务隔离级别下:insert into order_record select * from order_today 加锁规则是:order_record表锁,order_today逐步锁(扫描一个锁一个)。 分析执行过程。 通过观察迁移sql的执行情况你会发现order_today是全表扫描,也就意味着在执行insert into select from 语句时,mysql会从上到下扫描order_today内的记...