位置: 编程技术 - 正文

MySQL主从同步原理介绍

编辑:rootadmin

推荐整理分享MySQL主从同步原理介绍,希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:,内容如对您有帮助,希望把文章链接给更多的朋友!

概述

Mysql的Replication(复制)是一个异步的复制过程,从一个 Mysql instance(我们称之为 Master)复制到另一个Mysql instance(我们称之 Slave)。在 Master 与 Slave之间的实现整个复制过程主要由三个线程来完成,其中两个线程(Sql线程和IO线程)在 Slave 端,另外一个线程(IO线程)在Master端。

主从同步需求

要实现 MySQL 的 Replication ,首先必须打开 Master 端的BinaryLog(mysql-bin.xxxxxx)功能,否则无法实现。因为整个复制过程实际上就是Slave从Master端获取该日志然后再在自己身上完全顺序的执行日志中所记录的各种操作。打开 MySQL 的 Binary Log 可以通过在启动 MySQL Server 的过程中使用“—log-bin” 参数选项,或者在 my.cnf 配置文件中的 mysqld 参数组([mysqld]标识后的参数部分)增加“log-bin” 参数项。

主从同步过程

MySQL 复制的基本过程如下:

MySQL主从同步原理介绍

1.Slave上面的IO线程连接上Master,并请求从指定日志文件的指定位置(或者从最开始的日志)之后的日志内容;2.Master接收到来自Slave的IO线程的请求后,通过负责复制的IO线程根据请求信息读取指定日志指定位置之后的日志信息,返回给Slave端的 IO线程。返回信息中除了日志所包含的信息之外,还包括本次返回的信息在Master端的Binary Log文件的名称以及在Binary Log中的位置;3.Slave的IO线程接收到信息后,将接收到的日志内容依次写入到 Slave 端的RelayLog文件(mysql-relay-bin.xxxxxx)的最末端,并将读取到的Master端的bin-log的文件名和位置记录到master-info文件中,以便在下一次读取的时候能够清楚的告诉Master“我需要从某个bin-log的哪个位置开始往后的日志内容,请发给我”。4.Slave的SQL线程检测到Relay Log中新增加了内容后,会马上解析该Log文件中的内容成为在Master 端真实执行时候的那些可执行的Query语句,并在自身执行这些Query。这样,实际上就是在Master端和Slave端执行了同样的Query,所以两端的数据是完全一样的。

实际上,在老版本中,MySQL 的复制实现在 Slave 端并不是由 SQL 线程和 IO线程这两个线程共同协作而完成的,而是由单独的一个线程来完成所有的工作。但是 MySQL的工程师们很快发现,这样做存在很大的风险和性能问题,主要如下:

1.首先,如果通过一个单一的线程来独立实现这个工作的话,就使复制 Master 端的,BinaryLog日志,以及解析这些日志,然后再在自身执行的这个过程成为一个串行的过程,性能自然会受到较大的限制,这种架构下的Replication 的延迟自然就比较长了。

3.其次,Slave 端的这个复制线程从 Master 端获取 Binary Log 过来之后,需要接着解析这些内容,还原成Master 端所执行的原始 Query,然后在自身执行。在这个过程中,Master端很可能又已经产生了大量的变化并生成了大量的Binary Log 信息。如果在这个阶段 Master端的存储系统出现了无法修复的故障,那么在这个阶段所产生的所有变更都将永远的丢失,无法再找回来。这种潜在风险在Slave端压力比较大的时候尤其突出,因为如果 Slave压力比较大,解析日志以及应用这些日志所花费的时间自然就会更长一些,可能丢失的数据也就会更多。

所以,在后期的改造中,新版本的 MySQL 为了尽量减小这个风险,并提高复制的性能,将 Slave端的复制改为两个线程来完成,也就是前面所提到的 SQL 线程和 IO线程。最早提出这个改进方案的是Yahoo!的一位工程师“JeremyZawodny”。通过这样的改造,这样既在很大程度上解决了性能问题,缩短了异步的延时时间,同时也减少了潜在的数据丢失量。

当然,即使是换成了现在这样两个线程来协作处理之后,同样也还是存在 Slave数据延时以及数据丢失的可能性的,毕竟这个复制是异步的。只要数据的更改不是在一个事务中,这些问题都是存在的。

总结

初步了解了MySQL主从复制的原理。

MySQL开启记录执行过的SQL语句方法 概述很多时候,我们需要知道MySQL执行过哪些SQL语句,比如MySQL被注入后,需要知道造成什么伤害等等。只要有SQL语句的记录,就能知道情况并作出对策

MySQL分页技术、6种分页方法总结 概述有朋友问:MySQL的分页似乎一直是个问题,有什么优化方法吗?网上看到赶集网XX推荐了一些分页方法,但似乎不太可行,你能点评一下吗?方法总结

在CentOS上安装phpMyAdmin的教程 前提在CentOS上安装phpMyAdmin,你第一步需要架设一台Web服务器(如Apache或nginx),安装好MySQL/MariaDB数据库和PHP。根据你的偏好和需求,你可以从LAMP和LEMP中选

标签: MySQL主从同步原理介绍

本文链接地址:https://www.jiuchutong.com/biancheng/347660.html 转载请保留说明!

上一篇:MySQL日志文件详解(mysql日志记录)

下一篇:MySQL开启记录执行过的SQL语句方法(查看mysql执行sql日志内容)

  • 应交税费借方和贷方各表示什么
  • 财务软件和报税软件区别
  • 公司购买股票如何做账
  • 公司年末报表
  • 合并报表中怎么抵消投资性房地产
  • 所得税可以预交吗现在
  • 开办期间的财务会计制度
  • 营业税金及附加借贷方向
  • 企业年报 工商
  • 贴现利息支付方式
  • 商品房买卖合同没有约定逾期交房违约金
  • 编制现金流量表的直接法和间接法
  • 公司美元账户收到美元要交税吗
  • 出口退税和企业所得税
  • 办税员身份怎么办理
  • 固定资产进项税额怎么抵扣
  • 失控包括
  • 未分配利润为负的原因
  • 失控发票的账务处理
  • 17税率改16税率的时间
  • 年报弥补以前年度亏损了还需要填107040表吗
  • 怎么进行现金流量分析
  • 没有认缴到位的股票
  • 企业发放贷款怎么做分录
  • 土地增值税的税率和速算扣除数
  • 快捷工具栏在哪儿
  • 清算中无法偿还的债务
  • 系统安装工具有什么用
  • bios界面进入
  • 如何开启系统自带杀毒软件
  • 企业信用贷款账户是什么
  • 企业固定资产有哪些
  • 一只猫在花园里英语
  • 小规模纳税人结转损益会计分录
  • 解决的英文
  • 详解php字符串替换
  • php中foreach循环遍历数组
  • 好用的移动端ui框架
  • 购买超市购物卡会计分录
  • 购买黄金会计分录怎么写
  • 增值税普通发票有什么用
  • 机动车发票抵扣新规
  • 车辆保险费怎么入账
  • 企业报废原材料如何处理
  • PHPCMS 是 ThinkPHP 开发的吗?
  • 领取定额备用金的会计分录
  • 公司买的微波炉算职工福利费吗
  • 有进项发票没有销项发票怎样做账
  • 公司的装修费计入什么科目
  • 高企数据造假
  • 房地产购买流程
  • 期初应收账款对应什么科目试算平衡
  • 逾期未认证的增值税发票处理办法
  • 土地使用税退税怎么做会计分录
  • 什么差旅费
  • 电子银行承兑汇票能拆票吗
  • 会计记账科目表
  • 进项和销项必须一致才能抵扣吗
  • SQL Server Alert发送告警邮件少了的原因
  • sqlserver数据库备份
  • sql合并多条记录某一个字段
  • 设置动态壁纸来电铃声
  • centos如何安装vim
  • gb4.exe
  • 电脑win7一开机就弹出各种广告窗口怎么办
  • centos7打开命令行
  • wind8桌面
  • win8.1系统安装
  • cocos2d教程
  • 游戏开发指南笔趣阁
  • java怎样学
  • javascript的核心语言对象包括
  • shell 判断进程是否存在
  • java性能调优实战 网盘
  • 如何在android studio中导入其他包
  • 外部js获取当前vue实例
  • android studio怎么清除缓存
  • 增加税务人员怎么加?
  • 会计的各种税
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设