位置: 编程技术 - 正文

MySQL主从同步原理介绍

编辑:rootadmin

推荐整理分享MySQL主从同步原理介绍,希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:,内容如对您有帮助,希望把文章链接给更多的朋友!

概述

Mysql的Replication(复制)是一个异步的复制过程,从一个 Mysql instance(我们称之为 Master)复制到另一个Mysql instance(我们称之 Slave)。在 Master 与 Slave之间的实现整个复制过程主要由三个线程来完成,其中两个线程(Sql线程和IO线程)在 Slave 端,另外一个线程(IO线程)在Master端。

主从同步需求

要实现 MySQL 的 Replication ,首先必须打开 Master 端的BinaryLog(mysql-bin.xxxxxx)功能,否则无法实现。因为整个复制过程实际上就是Slave从Master端获取该日志然后再在自己身上完全顺序的执行日志中所记录的各种操作。打开 MySQL 的 Binary Log 可以通过在启动 MySQL Server 的过程中使用“—log-bin” 参数选项,或者在 my.cnf 配置文件中的 mysqld 参数组([mysqld]标识后的参数部分)增加“log-bin” 参数项。

主从同步过程

MySQL 复制的基本过程如下:

MySQL主从同步原理介绍

1.Slave上面的IO线程连接上Master,并请求从指定日志文件的指定位置(或者从最开始的日志)之后的日志内容;2.Master接收到来自Slave的IO线程的请求后,通过负责复制的IO线程根据请求信息读取指定日志指定位置之后的日志信息,返回给Slave端的 IO线程。返回信息中除了日志所包含的信息之外,还包括本次返回的信息在Master端的Binary Log文件的名称以及在Binary Log中的位置;3.Slave的IO线程接收到信息后,将接收到的日志内容依次写入到 Slave 端的RelayLog文件(mysql-relay-bin.xxxxxx)的最末端,并将读取到的Master端的bin-log的文件名和位置记录到master-info文件中,以便在下一次读取的时候能够清楚的告诉Master“我需要从某个bin-log的哪个位置开始往后的日志内容,请发给我”。4.Slave的SQL线程检测到Relay Log中新增加了内容后,会马上解析该Log文件中的内容成为在Master 端真实执行时候的那些可执行的Query语句,并在自身执行这些Query。这样,实际上就是在Master端和Slave端执行了同样的Query,所以两端的数据是完全一样的。

实际上,在老版本中,MySQL 的复制实现在 Slave 端并不是由 SQL 线程和 IO线程这两个线程共同协作而完成的,而是由单独的一个线程来完成所有的工作。但是 MySQL的工程师们很快发现,这样做存在很大的风险和性能问题,主要如下:

1.首先,如果通过一个单一的线程来独立实现这个工作的话,就使复制 Master 端的,BinaryLog日志,以及解析这些日志,然后再在自身执行的这个过程成为一个串行的过程,性能自然会受到较大的限制,这种架构下的Replication 的延迟自然就比较长了。

3.其次,Slave 端的这个复制线程从 Master 端获取 Binary Log 过来之后,需要接着解析这些内容,还原成Master 端所执行的原始 Query,然后在自身执行。在这个过程中,Master端很可能又已经产生了大量的变化并生成了大量的Binary Log 信息。如果在这个阶段 Master端的存储系统出现了无法修复的故障,那么在这个阶段所产生的所有变更都将永远的丢失,无法再找回来。这种潜在风险在Slave端压力比较大的时候尤其突出,因为如果 Slave压力比较大,解析日志以及应用这些日志所花费的时间自然就会更长一些,可能丢失的数据也就会更多。

所以,在后期的改造中,新版本的 MySQL 为了尽量减小这个风险,并提高复制的性能,将 Slave端的复制改为两个线程来完成,也就是前面所提到的 SQL 线程和 IO线程。最早提出这个改进方案的是Yahoo!的一位工程师“JeremyZawodny”。通过这样的改造,这样既在很大程度上解决了性能问题,缩短了异步的延时时间,同时也减少了潜在的数据丢失量。

当然,即使是换成了现在这样两个线程来协作处理之后,同样也还是存在 Slave数据延时以及数据丢失的可能性的,毕竟这个复制是异步的。只要数据的更改不是在一个事务中,这些问题都是存在的。

总结

初步了解了MySQL主从复制的原理。

MySQL开启记录执行过的SQL语句方法 概述很多时候,我们需要知道MySQL执行过哪些SQL语句,比如MySQL被注入后,需要知道造成什么伤害等等。只要有SQL语句的记录,就能知道情况并作出对策

MySQL分页技术、6种分页方法总结 概述有朋友问:MySQL的分页似乎一直是个问题,有什么优化方法吗?网上看到赶集网XX推荐了一些分页方法,但似乎不太可行,你能点评一下吗?方法总结

在CentOS上安装phpMyAdmin的教程 前提在CentOS上安装phpMyAdmin,你第一步需要架设一台Web服务器(如Apache或nginx),安装好MySQL/MariaDB数据库和PHP。根据你的偏好和需求,你可以从LAMP和LEMP中选

标签: MySQL主从同步原理介绍

本文链接地址:https://www.jiuchutong.com/biancheng/347660.html 转载请保留说明!

上一篇:MySQL日志文件详解(mysql日志记录)

下一篇:MySQL开启记录执行过的SQL语句方法(查看mysql执行sql日志内容)

  • 印花税什么时候开始计入税金及附加
  • 交增值税及附加税怎么做账
  • 其他应付款和其他应付款可以重分类
  • 本年已交税费怎么算
  • 总公司汇总缴纳所得税升为一般纳税人分公司受影响吗
  • 个人投资者取得现金红利的过程不用支付利息税
  • 票据和结算凭证上的签章
  • 商业企业的购货运费计入什么
  • 长期股权投资出售比例计算
  • 标书费收据丢失怎么办
  • 固定资产损失如何计提
  • 有2处收入要交个税,自己如何去交个税
  • 上海个人住房房产税
  • 国家税务局如何登录
  • 海关新增成交方式exw条款,如何退税?
  • 加计抵减10%会计分录用营业外收入还是其他业务收入
  • 发票的开具时效为
  • 补缴的公积金可以取出来吗
  • 已预缴的城建税会计分录
  • 跨期间收入如何确定当期收入
  • app data文件夹
  • 快捷方式都变成pdf
  • 报销旅游门票怎么报销
  • 销售人员领用材料
  • 其他应收款年末余额较大
  • 区分不同情形
  • 个人将房产过户到一人有限公司交什么税
  • php中实现文件上传需要用到哪几个函数
  • ajax调用php接口
  • ftp port命令
  • php怎么调用图片
  • 帝国cms是基于什么的
  • 帝国cms模板文件在哪
  • 成本核算的会计处理
  • 商品流通企业购入的商品采用售价金额法核算的
  • 销售提成缴税
  • sql20054n
  • 核定征收的三种方式
  • 交易性金融资产是什么意思
  • 会计销售返利处理流程
  • 当月只有进项票没有销项票怎么办
  • 公司购轿车会计分录怎么做
  • 违约金罚款计入什么科目
  • 计提坏账准备不属于企业的或有事项
  • 工伤事故补助或赔偿标准
  • 商会开年会费用怎么入账
  • 企业不加入工会的原因
  • 生育津贴与员工有关吗
  • 汽车租赁公司成本
  • mysql 5.7.12 winx64手动安装教程
  • win7组织在哪
  • 微软win8下载
  • windowsxp的快捷键
  • win10总是锁定
  • windows 高分屏
  • 64位windows8系统安装驱动时出现签名错误的解决方法
  • xp系统插u盘没反应怎么解决
  • macbookair电脑屏幕
  • win10可以关闭的功能
  • win10桌面图片预览
  • 跑跑跑游戏
  • Cocos2d-x之getVisibleSize,getContentSize,boundingBox,getContentSizeInPixels,convertToGL,convertToUI
  • unity 3d数学
  • 有nodejs就不需要用java了么
  • shell脚本编写的基本知识
  • 虚拟内存系统盘
  • opengl gpu编程
  • jQuery仿写百度百科的目录树
  • ssh -keygen
  • android录音软件
  • python开发技术详解
  • 简单阐述javascript的主要作用
  • dos 删除文件夹下所有文件
  • 税盘上怎么查每个月一共开了多少金额
  • 河北省国家税务局长简介
  • 江苏省国家税务局官网
  • 小规模纳税人个税税率
  • 税率的计算器在线计算
  • 税务年报截止日期2022
  • 机构改革后地方金融局怎么办
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设