热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

Mysql主从复制原理

Mysql主从复制原理随着网站业务的不断发展,用户量的不断增加,数据量不断地增长,数据库的访问量也相应的增长,到了一定的时间,网站首先出现的瓶颈就是在数据库层(这里没有将缓存加入进

Mysql 主从复制原理

随着网站业务的不断发展,用户量的不断增加,数据量不断地增长,数据库的访问量也相应的增长,到了一定的时间,网站首先出现的瓶颈就是在数据库层(这里没有将缓存加入进来),这时候就需要对数据库进行适当的拆分,比如说分库或分表等,如果数据库在分库,分表后还是出现瓶颈,这时就好考虑数据库读写分离,尤其在读多写少的时候。

mysql中读写分离的方案就是主从复制,master服务器将更新的记录到binary log中,mysql中这个叫二进制日志事件(binary log events), slaver服务器将master中的binary log events 复制到自己的中继日志(relay log)中,slave服务器将监听中继日志,将中继日志的改变记录到数据库中。下图描述了复制的过程:

技术分享

其中,mysql支持大概3种类型的复制类型:

1.基于语句的复制,(也叫做逻辑复制,logical replication),优点是基于语句的复制的二进制日志可以很好的进行压缩,而且日志的数据量也较小,缺点是基于语句的复制必须是串行化。

2.基于记录的复制(Row-Based Replication),在二进制日志中记录下实际数据的改变,优点就是可以对任何语句都能正确工作,一些语句的效率更高,缺点就是二进制日志会很大,不能使用mysqlbinlog来查看二进制日志.

3.混合类型的复制,默认采用基于语句的复制,一旦发现基于语句的无法精确的复制时,就会采用基于行的复制.

复制能解决的一些问题:

1.数据分布 (Data distribution )

2.可以实现负载均衡(load balancing),通常所说的读写分离

3.可以实现数据的备份(Backups),但是不能当真正意义上数据备份来用

4.高可用性和容错行(比如双主模型中的互为主从能实现高可用)

但是,主从复制也带来其他一系列其他问题,典型的就是主从不同步,导致主从不同步的原因是 :服务器一般都是多核多线程,导致主节点可以同时执行多条读写操作,而记录二进制日志则必须按顺序有先后的记录,从节点在一条一条复制过去,生成中继日志,再执行语句,这里就会出现复制延迟。其他问题就是写入无法扩展,锁表率上升等。

复制的体系结构有以下一些基本原则:

(1) 每个slave只能有一个master;

(2) 每个slave只能有一个唯一的服务器ID;

(3) 每个master可以有很多slave;

(4) 如果你设置log_slave_updates,slave可以是其它slave的master,从而扩散master的更新

Mysql复制常见的几种模式:

1.一主多从

由一个master和一个slave组成复制系统是最简单的情况。Slave之间并不相互通信,只能与master进行通信。主要用于读压力比较大的应用的数据库端廉价扩展解决方案。

技术分享

2.主主复制

Master-Master复制的两台服务器,既是master,又是另一台服务器的slave。这样,任何一方所做的变更,都会通过复制应用到另外一方的数据库中。在这种复制架构中,各自上运行的不是同一db,比如左边的是db1,右边的是db2,db1的从在右边反之db2的从在左边,两者互为主从,再辅助一些监控的服务还可以实现一定程度上的高可以用。

技术分享

3.主动-被动模式(HA)

这种模式由master-master结构变化而来的,它避免了M-M的缺点,实际上,这是一种具有容错和高可用性的系统。它的不同点在于其中只有一个节点在提供读写服务,另外一个节点时刻准备着,当主节点一旦故障马上接替服务。比如通过corosync+pacemaker+drbd+mysql就可以提供这样一组高可用服务,主备模式下再跟着slave服务器,也可以实现读写分离.

技术分享

主从复制中容易出现的问题:

1.限制从服务器只读,保证主从数据一致。

show global variables like ‘%read%‘

更改slave的全局服务器变量read_only为on

set global read_only on

从节点上授权只读 set global read_Only= 1;如果永久有效更改mysql的my.ini 或my.cnf,在[mysql] 中设置read_Only= 1

2.保证主从复制时的事务安全

如果mysql比较繁忙它会把二进制日志缓存在内存中,不繁忙时才会把他写到磁盘中,前提就是mysql对二进制日志事件数据会缓冲。在master上设置如下参数 set global  sync_binlog = 1 事物一提交,就必须同步二进制日志,这样会降低性能,但是数据非常重要的情况下。

转载请注明文章来源


Mysql 主从复制原理


推荐阅读
  • 为何Compose与Swarm之后仍有Kubernetes的诞生?
    探讨在已有Compose和Swarm的情况下,Kubernetes是如何以其独特的设计理念和技术优势脱颖而出,成为容器编排领域的领航者。 ... [详细]
  • 随着Linux操作系统的广泛使用,确保用户账户及系统安全变得尤为重要。用户密码的复杂性直接关系到系统的整体安全性。本文将详细介绍如何在CentOS服务器上自定义密码规则,以增强系统的安全性。 ... [详细]
  • 本文探讨了一种常见的C++面试题目——实现自己的String类。通过此过程,不仅能够检验开发者对C++基础知识的掌握程度,还能加深对其高级特性的理解。文章详细介绍了如何实现基本的功能,如构造函数、析构函数、拷贝构造函数及赋值运算符重载等。 ... [详细]
  • 默认情况下,Git 使用 Nano 编辑器进行提交信息的编辑,但如果您更喜欢使用 Vim,可以通过简单的配置更改来实现这一变化。本文将指导您如何通过修改全局配置文件来设置 Vim 作为默认的 Git 提交编辑器。 ... [详细]
  • 探索Java 11中的ZGC垃圾收集器
    Java 11引入了一种新的垃圾收集器——ZGC,由Oracle公司研发,旨在支持TB级别的内存容量,并保证极低的暂停时间。本文将探讨ZGC的开发背景、技术特点及其潜在的应用前景。 ... [详细]
  • 本文探讨了使用普通生成函数和指数生成函数解决组合与排列问题的方法,特别是在处理特定路径计数问题时的应用。文章通过详细分析和代码实现,展示了如何高效地计算在给定条件下不相邻相同元素的排列数量。 ... [详细]
  • 在Notepad++中配置Markdown语法高亮及实时预览功能
    本文详细介绍了如何在Notepad++中配置Markdown语法高亮和实时预览功能,包括必要的插件安装和设置步骤。 ... [详细]
  • 探讨如何在映射文件中处理重复的属性字段,以避免数据操作时出现错误。 ... [详细]
  • 网络流24题——试题库问题
    题目描述:假设一个试题库中有n道试题。每道试题都标明了所属类别。同一道题可能有多个类别属性。现要从题库中抽取m道题组成试卷。并要求试卷包含指定类型的试题。试设计一个满足要求的组卷算 ... [详细]
  • 利用无代码平台实现高效业务应用开发
    随着市场环境的变化加速,全球企业都在探索更为敏捷的应用开发模式,以便快速响应新兴的商业机遇。然而,传统的软件开发方式不仅成本高昂,而且耗时较长,这往往导致IT与业务部门之间的合作障碍,进而影响项目的成功。本文将探讨如何通过无代码开发平台解决这些问题。 ... [详细]
  • 本文介绍了如何通过安装 sqlacodegen 和 pymysql 来根据现有的 MySQL 数据库自动生成 ORM 的模型文件(model.py)。此方法适用于需要快速搭建项目模型层的情况。 ... [详细]
  • 本文探讨了程序员这一职业的本质,认为他们是专注于问题解决的专业人士。文章深入分析了他们的日常工作状态、个人品质以及面对挑战时的态度,强调了编程不仅是一项技术活动,更是个人成长和精神修炼的过程。 ... [详细]
  • 在1995年,Simon Plouffe 发现了一种特殊的求和方法来表示某些常数。两年后,Bailey 和 Borwein 在他们的论文中发表了这一发现,这种方法被命名为 Bailey-Borwein-Plouffe (BBP) 公式。该问题要求计算圆周率 π 的第 n 个十六进制数字。 ... [详细]
  • 本文介绍了SIP(Session Initiation Protocol,会话发起协议)的基本概念、功能、消息格式及其实现机制。SIP是一种在IP网络上用于建立、管理和终止多媒体通信会话的应用层协议。 ... [详细]
  • 二维码的实现与应用
    本文介绍了二维码的基本概念、分类及其优缺点,并详细描述了如何使用Java编程语言结合第三方库(如ZXing和qrcode.jar)来实现二维码的生成与解析。 ... [详细]
author-avatar
去弥O补从前所有不完整
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有