服务器之家:专注于VPS、云服务器配置技术及软件下载分享
分类导航

Mysql|Sql Server|Oracle|Redis|MongoDB|PostgreSQL|Sqlite|DB2|mariadb|Access|数据库技术|

服务器之家 - 数据库 - Mysql - MYSQL大表改字段慢问题的解决

MYSQL大表改字段慢问题的解决

2023-05-19 17:08Java开发高级进阶公众号 Mysql

本文主要介绍了MYSQL大表改字段慢问题的解决,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧

Mysql如何加快大表的ALTER TABLE操作速度

MYSQL的ALTER TABLE操作的性能对大表来说是个大问题。MYSQL执行大部分修改表结构操作的方法是用新的表结构创建一个空表,从旧表中查出所有数据插入新表,然后删除旧表。这样操作可能需要花费很长时间,如果内存不足而表又很大,而且还有很多索引的情况下尤其如此。许多人都有这样的经验,ALTER TABLE操作需要花费数个小时甚至数天才能完成。

一般而言,大部分ALTER TABLE操作将导致MYSQL服务中断。对常见的场景,能使用的技巧只有两种:

  • 一种是先在一台不提供服务的机器上执行ALTER TABLE操作,然后和提供服务的主库进行切换;
  • 另外一种技巧就是“影子拷贝”。影子拷贝技巧是用要求的表结构创建一张新表,然后通过重命名和删表操作交换两张表。

不是所有的ALTER TABLE操作都会引起表重建。例如,有两种方法可以改变或删除一个列的默认值(一种方法很快,另一种则很慢)。

假如要修改电影的默认租赁期限,从三天改到五天。下面是很慢的方式:

?
1
mysql> ALTER TABLE film modify column rental_duration tinyint(3) not null default 5;

SHOW STATUS显示这个语句做了1000次读和1000次插入操作。换句话说,它拷贝了整张表到一张新表,甚至列的类型、大小和可否为null属性都没有改变。

理论上,MYSQL可以跳过创建新表的吧步骤。列的默认值实际上存在表的.frm文件中,所以可以直接修改这个文件而不需要改动表本身。然而MYSQL还没有采用这种优化的方法,所以MODIFY COLUMN操作都将导致表重建。

另外一种方法是通过ALTER COLUMN操作来改变列的默认值;

?
1
mysql> ALTER TABLE film ALTER COLUMN rental_duration set DEFAULT 5;

这个语句会直接修改.frm文件而不涉及表数据。所以这个操作是非常快的。

只修改.frm文件

从上面的例子我们看到修改表的.frm文件是很快的,但MYSQL有时候会在没有必要的时候也重建表。如果愿意冒一些风险,可以让MYSQL做一些其他类型的修改而不用重建表。

注意 下面要演示的技巧是不受官方支持的,也没有文档记录,并且也可能不能正常工作,采用这些技术需要自己承担风险。>建议在执行之前首先备份数据!

下面这些操作是有可能不需要重建表的:

  • 移除(不是增加)一个列的AUTO_INCREMENT属性。
  • 增加、移除,或更改ENUM和SET常亮。如果移除的是已经有行数据用到其值的常量,查询将会返回一个空字符串。

步骤:

  • 创建一张有相同结构的空表,并进行所需要的修改(例如:增加ENUM常量)。
  • 执行FLUSH TABLES WITH READ LOCK。这将会关闭所有正在使用的表,并且禁止任何表被打开。
  • 交换.frm文件。
  • 执行UNLOCK TABLES 来释放第二步的读锁。

下面以给film表的rating列增加一个常量为例来说明。当前列看起来如下:

?
1
mysql> SHOW COLUMNS FROM film LIKE 'rating';
Field Type Null Key Default Extra
rating enum('G','PG','PG-13','R','NC-17') YES   G  

假设我们需要为那些对电影更加谨慎的父母们增加一个PG-14的电影分级:

?
1
2
3
mysql> CREATE TABLE film_new like film;
mysql> ALTER TABLE film_new modify column rating ENUM('G','PG','PG-13','R','NC-17','PG-14') DEFAULT 'G';
mysql> FLUSH TABLES WITH READ LOCK;

注意,我们是在常量列表的末尾增加一个新的值。如果把新增的值放在中间,例如:PG-13之后,则会导致已经存在的数据的含义被改变:已经存在的R值将变成PG-14,而已经存在的NC-17将成为R,等等。

接下来用操作系统的命令交换.frm文件:

?
1
2
3
/var/lib/mysql/sakila# mv film.frm film_tmp.frm
/var/lib/mysql/sakila# mv film_new.frm film.frm
/var/lib/mysql/sakila# mv film_tmp.frm film_new.frm

再回到Mysql命令行,现在可以解锁表并且看到变更后的效果了:

?
1
2
mysql> UNLOCK TABLES;
mysql> SHOW COLUMNS FROM film like 'rating'\G

****************** 1. row*********************

Field: rating
Type: enum('G','PG','PG-13','R','NC-17','PG-14')

最后需要做的是删除为完成这个操作而创建的辅助表:

?
1
mysql> DROP TABLE film_new;

到此这篇关于MYSQL大表改字段慢问题的解决的文章就介绍到这了,更多相关MYSQL大表改字段慢内容请搜索服务器之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持服务器之家!

原文链接:https://blog.csdn.net/weixin_42084197/article/details/129576702

延伸 · 阅读

精彩推荐
  • Mysql在MySQL中同时查找两张表中的数据的示例

    在MySQL中同时查找两张表中的数据的示例

    这篇文章主要介绍了在MySQL中同时查找两张表中的数据的示例,即一次查询操作返回两张表的结果,需要的朋友可以参考下 ...

    MYSQL教程网3692020-05-13
  • MysqlSQL Server携程核心系统无感迁移到MySQL实战

    SQL Server携程核心系统无感迁移到MySQL实战

    这篇文章主要介绍了SQL Server携程核心系统无感迁移到MySQL实战,文章通过基于数据库部署架构镜像构建了订单缓存统一管理热点数据,解决各端差异,具体...

    携程技术6882022-11-03
  • Mysqlmysql常用sql与命令之从入门到删库跑路

    mysql常用sql与命令之从入门到删库跑路

    这篇文章主要介绍了mysql sql命令之从入门到删库跑路的相关命令与操作...

    智障二百五10902021-04-28
  • Mysql10款好用的MySQL GUI工具,数据库管理员的好帮手

    10款好用的MySQL GUI工具,数据库管理员的好帮手

    MySQL是最广泛使用和流行的开源数据库之一,围绕它有许多工具,可以让设计,创建和管理数据库的过程变得更加容易和便捷。但是如何选择很适合自己需...

    今日头条84722019-12-08
  • Mysql浅析MySQL如何实现事务隔离

    浅析MySQL如何实现事务隔离

    使用过关系型数据库的,应该都事务的概念有所了解,知道事务有 ACID 四个基本属性:原子性(Atomicity)、一致性(Consistency)、隔离性(Isolation)和持久...

    JJian8892021-08-24
  • Mysqlmysql学习笔记之基础知识

    mysql学习笔记之基础知识

    本文是MySQL学习笔记系列文章的第一篇,给大家简单讲解下MySQL的一些检查操作命令,希望大家能够喜欢...

    Liu Nan5042020-07-17
  • Mysqlmysql中操作表常用的sql总结

    mysql中操作表常用的sql总结

    这篇文章主要给大家介绍了mysql中操作表常用的sql的相关资料,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要...

    书中黄金屋11232021-03-18
  • MysqlMysql主从同步的实现原理

    Mysql主从同步的实现原理

    这篇文章主要介绍了Mysql主从同步的实现原理,小编觉得挺不错的,现在分享给大家,也给大家做个参考。一起跟随小编过来看看吧...

    zilu5702020-07-20