当前位置：网站首页>MySQL batch update and batch update method of different values ​​of multiple records

MySQL batch update and batch update method of different values ​​of multiple records

2022-08-10 15:32:00 【HUAWEI CLOUD】

​在mysql中批量更新我们可能使用update,replace into来操作,下面详细介绍mysql批量更新与性能.

一、批量更新

mysql更新语句很简单,更新一条数据的某个字段,一般这样写：

UPDATE mytable SET myfield = 'value' WHERE other_field = 'other_value';

如果更新同一字段为同一个值,mysql也很简单,修改下where即可：

UPDATE mytable SET myfield = 'value' WHERE other_field in ('other_values');

这里注意‘other_values' 是一个逗号（,）分隔的字符串,如：1,2,3

那如果更新多条数据为不同的值,可能很多人会这样写：

foreach ($display_order as $id => $ordinal) {     $sql = "UPDATE categories SET display_order = $ordinal WHERE id = $id";     mysql_query($sql); }

即是循环一条一条的更新记录.一条记录update一次,这样性能很差,也很容易造成阻塞.

那么能不能一条sql语句实现批量更新呢？mysql并没有提供直接的方法来实现批量更新,但是可以用点小技巧来实现.

UPDATE mytable     SET myfield = CASE id         WHEN 1 THEN 'value'        WHEN 2 THEN 'value'        WHEN 3 THEN 'value'    ENDWHERE id IN (1,2,3);

这里使用了case when 这个小技巧来实现批量更新.

二、举个例子

UPDATE categories     SET display_order = CASE id         WHEN 1 THEN 3         WHEN 2 THEN 4         WHEN 3 THEN 5     ENDWHERE id IN (1,2,3);

这句sql的意思是,更新display_order 字段,如果id=1 则display_order 的值为3,如果id=2 则 display_order 的值为4,如果id=3 则 display_order 的值为5.即是将条件语句写在了一起.


这里的where部分不影响代码的执行,但是会提高sql执行的效率.确保sql语句仅执行需要修改的行数,这里只有3条数据进行更新,而where子句确保只有3行数据执行.

如果更新多个值的话,只需要稍加修改：

UPDATE categories     SET display_order = CASE id         WHEN 1 THEN 3         WHEN 2 THEN 4         WHEN 3 THEN 5     END,     title = CASE id         WHEN 1 THEN 'New Title 1'        WHEN 2 THEN 'New Title 2'        WHEN 3 THEN 'New Title 3'    ENDWHERE id IN (1,2,3);

到这里,已经完成一条mysql语句更新多条记录了.

但是要在业务中运用,需要结合服务端语言,这里以php为例,构造这条mysql语句：

$display_order = array(     1 => 4,     2 => 1,     3 => 2,     4 => 3,     5 => 9,     6 => 5,     7 => 8,     8 => 9 ); $ids = implode(',', array_keys($display_order)); $sql = "UPDATE categories SET display_order = CASE id "; foreach ($display_order as $id => $ordinal) {     $sql .= sprintf("WHEN %d THEN %d ", $id, $ordinal); } $sql .= "END WHERE id IN ($ids)"; echo $sql;

这个例子,有8条记录进行更新.代码也很容易理解,你学会了吗

三、性能分析

当使用上万条记录利用mysql批量更新,发现使用最原始的批量update发现性能很差,有以下三种优化办法：

3.1 批量update,一条记录update一次,性能很差

update test_tbl set dr='2' where id=1;

3.2 replace into 或者insert into ...on duplicate key update

replace into test_tbl (id,dr) values (1,'2'),(2,'3'),...(x,'y');

或者使用

insert into test_tbl (id,dr) values  (1,'2'),(2,'3'),...(x,'y') on duplicate key update dr=values(dr);

3.3 创建临时表,先更新临时表,然后从临时表中update

create temporary table tmp(id int(4) primary key,dr varchar(50));insert into tmp values  (0,'gone'), (1,'xx'),...(m,'yy');update test_tbl, tmp set test_tbl.dr=tmp.dr where test_tbl.id=tmp.id;

注意：这种方法需要用户有temporary 表的create 权限.

下面是上述方法update 100000条数据的性能测试结果：

逐条update

real    0m15.557suser    0m1.684ssys    0m1.372sreplace intoreal    0m1.394suser    0m0.060ssys    0m0.012sinsert into on duplicate key updatereal    0m1.474suser    0m0.052ssys    0m0.008screate temporary table and update:real    0m0.643suser    0m0.064ssys    0m0.004s

就测试结果来看,测试当时使用replace into性能较好.

replace into  和insert into on duplicate key update的不同在于：

  • replace into操作本质是对重复的记录先delete 后insert,如果更新的字段不全会将缺失的字段置为缺省值

  • insert into 则是只update重复记录,不会改变其它字段.

问题分析：

Error Code: 1175. You are using safe update mode and you tried to update a table without a WHERE that uses a KEY column To disable safe mode, toggle the option in Preferences SQL Queries and reconnect.

解决方案：

原因是在safe mode下,要强制安全点,update只能跟where了, 要取消这个限制,可以:

SET SQL_SAFE_UPDATES=0;

原网站

版权声明
本文为[HUAWEI CLOUD]所创，转载请带上原文链接，感谢
https://yzsam.com/2022/222/202208101458519703.html

边栏推荐

猜你喜欢

随机推荐