服务器之家:专注于VPS、云服务器配置技术及软件下载分享
分类导航

Mysql|Sql Server|Oracle|Redis|MongoDB|PostgreSQL|Sqlite|DB2|mariadb|Access|数据库技术|

服务器之家 - 数据库 - Mysql - 一文详解MySQL主从同步原理

一文详解MySQL主从同步原理

2022-08-16 12:06一灯架构 Mysql

这篇文章主要介绍了一文详解MySQL主从同步原理,MySQL主从同步是基于Bin Log实现的,而Bin Log记录的是原始SQL语句,更多相关内容介绍感兴趣的小伙伴可以参考一下

1. MySQL主从同步实现方式

MySQL主从同步是基于Bin Log实现的,而Bin Log记录的是原始SQL语句。

Bin Log共有三种日志格式,可以binlog_format配置参数指定。

参数值 含义
Statement 记录原始SQL语句,会导致更新时间与原库不一致。
比如 update_time=now()
Row 记录每行数据的变化,保证了数据与原库一致,缺点是数据量较大。
Mixed Statement和Row的混合模式,默认采用Statement模式,涉及日期、函数相关的时候采用Row模式,既减少了数据量,又保证了数据一致性。

常见的主从同步架构有一主多从、双主多从

一文详解MySQL主从同步原理

 

2. MySQL主从同步的作用

  • 读写分离,提升数据库性能
  • 容灾恢复,主服务器不可用时,从服务器提供服务,提高可用性
  • 冗余备份,主服务器数据损坏丢失,从服务器保留备份

 

一主多从架构

一般是主库负责所有读写请求,而从库只负责容灾恢复和冗余备份。

如果做了读写分离的话,主库负责写请求,从库负责读请求,可以提升数据库性能。

 

双主多从架构

一般是主库1负责所有读写请求,主库2不对外提供服务,只用来容灾恢复。

相比一主多从架构,双主多从架构可以减少宕机时间,更快恢复数据库可用状态。

 

3. 主动同步的原理

一文详解MySQL主从同步原理

  • 当主库数据发生变更时,写入本地Bin Log文件
  • 从库IO线程发起dump主库Bin Log文件的请求
  • 主库IO线程推送Bin Log文件到从库中
  • 从库IO线程把Bin Log内容写入本地的Relay Log文件中
  • 从库SQL线程读取Relay Log文件内容
  • 从库SQL线程重新执行一遍SQL语句

 

4. 主从同步延迟问题

主从同步最常遇到的问题就是主从同步延迟,可以通过在从库上执行show slave status命令查看延迟时间,Seconds_Behind_Master表示延迟的秒数。

一文详解MySQL主从同步原理

 

主从同步延迟的原因有哪些?

从库机器性能较差:

主库负责所有读写请求,从库只用来备份,会用性能较差的机器,执行时间自然较慢。

从库压力更大:

  • 读写分离后,主库负责写请求,从库负责读请求。
  • 互联网应用一般读请求更多,所以从库读压力更大,占用更多CPU资源。

网络延迟:

当主库的Bin Log文件往从库上发送时,可能产生网络延迟,也会导致从库数据跟不上。

主库有大事务:

当主库上有个大事务需要执行5分钟,把Bin Log文件发送到从库,从库至少也需要执行5分钟,所以这时候从库就出现了5分钟的延迟。

 

主从同步延迟的解决方案?

从库机器性能较差:

把从库换成跟主库同等规格的机器。

从库压力更大:

多搞几台从库,分担读请求压力。

网络延迟:

联系运维或者云服务提供商解决。

主库有大事务:

把大事务分割成小事务执行,大事务不但会产生从库延迟,还可能产生死锁,降低数据库并发性能,所以尽量少用大事务。

 

5. 如何提升主从同步性能

 

从库开启多线程复制

就是在主从同步的最后两步使用多线程,修改配置 slave_parallel_workers=4,代表开启4个复制线程。

一文详解MySQL主从同步原理

 

修改同步模式,改为异步

主从同步共有三种复制方式:

全同步复制:

当主库执行完一个事务,并且所有从库都执行完该事务后,才给客户端返回成功。

半同步复制:

至少有一个从库执行完成后,就给客户端返回成功。

异步复制:

主库执行完后,立即返回成功,不关心从库是否执行完成。

如果对数据安全性要求没那么高,可以把同步模式改成半同步复制或者异步复制。

 

修改从库Bin Log配置

修改sync_binlog配置:

sync_binlog=0 ,表示写binlog不立即刷新磁盘,由系统决定什么时候刷新磁盘。

sync_binlog=1,每次写binlog都刷新磁盘,安全性高,性能差。

sync_binlog=N,写N次binlog才刷新磁盘。

从库对数据安全性要求没那么高,可以设置sync_binlog=0。

修改innodb_flush_log_at_trx_commit配置:

innodb_flush_log_at_trx_commit=0,每隔一秒钟,把事务日志刷新到磁盘。

innodb_flush_log_at_trx_commit=1,每次事务都刷新到磁盘。

innodb_flush_log_at_trx_commit=2,每次事务都不主动刷新磁盘,由系统决定什么时候刷新磁盘。

从库对数据安全性要求没那么高,可以设置innodb_flush_log_at_trx_commit=2。

 

知识点总结

一文详解MySQL主从同步原理

到此这篇关于一文详解MySQL主从同步原理的文章就介绍到这了,更多相关MySQL主从同步原理内容请搜索服务器之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持服务器之家!

原文地址:https://juejin.cn/post/7112669947477622797

延伸 · 阅读

精彩推荐
  • Mysql微信开发中mysql字符编码问题

    微信开发中mysql字符编码问题

    本文给大家介绍微信开发过程中mysql字符编码问题,本文介绍的非常详细,感兴趣的朋友一起来学习吧 ...

    _Yummy4422020-05-18
  • Mysqlmysql导入导出数据中文乱码解决方法小结

    mysql导入导出数据中文乱码解决方法小结

    本文章总结了mysql导入导出数据中文乱码解决方法,出现中文乱码一般情况是导入导入时编码的设置问题,我们只要把编码调整一致即可解决此方法,下面...

    MYSQL教程网4722019-12-09
  • Mysql实现数据库水平切分的两个思路

    实现数据库水平切分的两个思路

    今天小编就为大家分享一篇关于实现数据库水平切分的两个思路,小编觉得内容挺不错的,现在分享给大家,具有很好的参考价值,需要的朋友一起跟随小...

    CODETC4222020-09-15
  • MysqlMySQL对数据表已有表进行分区表的实现

    MySQL对数据表已有表进行分区表的实现

    本文主要介绍对现有的一个表进行创建分区表,并把数据迁移到新表,可以按时间来分区,具有一定的参考价值,感兴趣的可以了解一下...

    orangleliu5772021-12-01
  • Mysqlmysql迁移至8.0时的注意事项(小结)

    mysql迁移至8.0时的注意事项(小结)

    这篇文章主要介绍了mysql迁移至8.0时的注意事项,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面...

    big_cat10902021-01-18
  • Mysqlubuntu server配置mysql并实现远程连接的操作方法

    ubuntu server配置mysql并实现远程连接的操作方法

    下面小编就为大家分享一篇ubuntu server配置mysql并实现远程连接的操作方法,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧 ...

    EricRae5732020-08-23
  • MysqlLinux/Mac MySQL忘记密码怎么办

    Linux/Mac MySQL忘记密码怎么办

    Linux/Mac MySQL忘记密码怎么办?这篇文章主要介绍了MySQL忘记密码的解决方法,命令行进行修改,具有一定的参考价值,感兴趣的小伙伴们可以参考一下...

    MYSQL教程网4172020-07-27
  • Mysqlmysql中各种常见join连表查询实例总结

    mysql中各种常见join连表查询实例总结

    这篇文章主要介绍了mysql中各种常见join连表查询,结合实例形式总结分析了MySQL中join连表查询的各种常见用法及相关操作注意事项,需要的朋友可以参考下...

    怀素真8662021-01-07