MySQL 5.5 主从复制异步、半同步以及注意事项详解

大纲

一、前言

二、Mysql 基础知识

三、Mysql 复制(Replication)

四、Mysql 复制(Replication)类型

五、Mysql 主从复制基本步骤

六、Mysql 主从复制（异步）

七、Mysql 主从复制（半同步）

八、Mysql 复制工具

九、Mysql 复制注意事项

十、Mysql 复制过滤

 

一、前言

       从这一篇博客开始我们就来学习mysql的高级课程，在前面的几篇博客我们讲解了mysql基础知识、mysql日志类型、mysql配置文件、mysql备份策略，这一篇博客中我们来讲解mysql的复制。

二、mysql基础知识

1.mysql日志类型

• 二进制日志

• 事务日志

• 错误日志

• 一般查询日志

• 中继日志

• 慢查询日志

注，有博友对mysql日志不怎么了解，可以参考这篇博客

2.mysql二进制日志详解

说明：默认开启，精确的记录了用户对数据库中的数据进行操作的命令和操作的数据对象。  
二进制日志文件的作用：

• 提供了增量备份的功能

• 提供了数据基于时间点的恢复，这个恢复的时间点可以由用户控制

• 为mysql的复制架构提供基础，将这主服务器的二进制日志复制到从服务器上并执行同样的操作，就可将数据进行同步

• 实现数据的高可用

• 分担负载

二进制日志默认存放位置：

• 数据目录下，以mysql-bin.XXXXXX命名的日志

二进制日志格式：

• 基于语句 statement

• 基于行 row

• 混合方式 mixed

二进制日志滚动方式：

• 重启服务

• 日志达到最大上限

• 执行flush logs

二进制日志事件：

• position 基于位置，也就是offset（偏移量）

• datetime 基于时间

• timestamp

二进制日志的查看与删除方式：

文件系统中查看二进制日志的命令：

配置mysql的主配置文件：  

注：一般建议将binlog日志与数据文件分开存放，不但可以提高mysql性能，还可以增加安全性！

三、Mysql 复制(Replication)

1.Mysql 复制作用

• 负载平衡(load balancing)

• 备份

• 高可用性(high availability)和容错

2.Mysql 复制如何工作

主要有三步（如下图）：

• master将改变记录到二进制日志(binary log)中（这些记录叫做二进制日志事件，binary log events）；

• slave将master的binary log events拷贝到它的中继日志(relay log)；

• slave重做中继日志中的事件，将改变反映它自己的数据。

具体说明：

       该过程的第一部分就是master记录二进制日志。在每个事务更新数据完成之前，master在二日志记录这些改变。MySQL将事务串行的写入二进制日志，即使事务中的语句都是交叉执行的。在事件写入二进制日志完成后，master通知存储引擎提交事务。

       下一步就是slave将master的binary log拷贝到它自己的中继日志。首先，slave开始一个工作线程——I/O线程。I/O线程在master上打开一个普通的连接，然后开始binlog dump process。Binlog dump process从master的二进制日志中读取事件，如果已经跟上master，它会睡眠并等待master产生新的事件。I/O线程将这些事件写入中继日志。   
SQL slave thread处理该过程的最后一步。SQL线程从中继日志读取事件，更新slave的数据，使其与master中的数据一致。只要该线程与I/O线程保持一致，中继日志通常会位于OS的缓存中，所以中继日志的开销很小。

       此外，在master中也有一个工作线程：和其它MySQL的连接一样，slave在master中打开一个连接也会使得master开始一个线程。复制过程有一个很重要的限制——复制在slave上是串行化的，也就是说master上的并行更新操作不能在slave上并行操作。所以slave上数据一般要慢于master上数据。即master与slave之间的数据在一定时间内会不同步。

四、Mysql 复制(Replication)类型

1.mysql复制类型有以下一些基本原则

• 每个slave只能有一个master；

• 每个slave只能有一个唯一的服务器ID；

• 每个master可以有很多slave；

• 如果你设置log_slave_updates，slave可以是其它slave的master，从而扩散master的更新。

注，MySQL不支持多主服务器复制(Multimaster Replication)——即一个slave可以有多个master。但是，通过一些简单的组合，我们却可以建立灵活而强大的复制体系结构。

2.mysql复制类型

(1).一主多从模式

注，由一个master和一个slave组成复制系统是最简单的情况。Slave之间并不相互通信，只能与master进行通信。

具体说明：

       如果写操作较少，而读操作很时，可以采取这种结构。你可以将读操作分布到其它的slave，从而减小master的压力。但是，当slave增加到一定数量时，slave对master的负载以及网络带宽都会成为一个严重的问题。这种结构虽然简单，但是，它却非常灵活，足够满足大多数应用需求。一些建议：

• 不同的slave扮演不同的作用(例如使用不同的索引，或者不同的存储引擎)

• 用一个slave作为备用master，只进行复制

• 用一个远程的slave，用于灾难恢复

       发送复制事件到其它slave，当设置log_slave_updates时，你可以让slave扮演其它slave的master。此时，slave把SQL线程执行的事件写进行自己的二进制日志(binary log)，然后，它的slave可以获取这些事件并执行它。

(2).双主模式

注，Master-Master复制的两台服务器，既是master，又是另一台服务器的slave。

具体说明：

主动的Master-Master复制有一些特殊的用处。例如，地理上分布的两个部分都需要自己的可写的数据副本。这种结构最大的问题就是更新冲突。假设一个表只有一行(一列)的数据，其值为1，如果两个服务器分别同时执行如下语句：

在第一个服务器上执行：   

那么结果是多少呢？一台服务器是4，另一个服务器是3，但是，这并不会产生错误。 

实际上，MySQL并不支持其它一些DBMS支持的多主服务器复制(Multimaster Replication)，这是MySQL的复制功能很大的一个限制(多主服务器的难点在于解决更新冲突)，但是，如果你实在有这种需求，你可以采用MySQL Cluster，以及将Cluster和Replication结合起来，可以建立强大的高性能的数据库平台。但是，可以通过其它一些方式来模拟这种多主服务器的复制。

(3).主从模式

注，这是master-master结构变化而来的，它避免了M-M的缺点，实际上，这是一种具有容错和高可用性的系统。它的不同点在于其中一个服务只能进行只读操作。

(4).带从服务器的Master-Master结构(Master-Master with Slaves)

注，这种结构的优点就是提供了冗余。在地理上分布的复制结构，它不存在单一节点故障问题，而且还可以将读密集型的请求放到slave上。

总结：一般常用的两种复制类型一种是主从模式，另一种是一主多从模式。在这一篇博客中我们主要讲解主从模式复制。

五、Mysql 主从复制基本步骤

1.master 配置

• 启用二进制日志

• 配置一个唯一的server-id

• 创建具有复制权限的用户

2.slave 配置

• 启用中继日志

• 配置一个唯一的server-id

• 连接主服务器，并开始复制数据

• 启动数据复制

注，基本步骤我们就说到这里，下面我们来具体演示一下主从复制。

六、Mysql 主从复制（异步）

1.mysql异步复制

       异步复制：MySQL本身支持单向的、异步的复制。异步复制意味着在把数据从一台机器拷贝到另一台机器时有一个延时，最重要的是这意味着当应用系统的事务在主服务器上提交并确认时数据并不能在同一时刻拷贝或应用到从服务器上。通常这个延时是由网络带宽、资源可用性和系统负载决定的。然而，使用正确的组件并且调优，复制能做到接近瞬时完成。    
       当主库有更新的时候，主库会把更新操作的SQL写入二进制日志(Bin log)，并维护一个二进制日志文件的索引，以便于日志文件轮回（Rotate）。在从库启动异步复制的时候，从库会开启两个I/O线程，其中一个线程连接主库，要求主库把二进制日志的变化部分传给从库，并把传回的日志写入本地磁盘。另一个线程则负责读取本地写入的二进制日志，并在本地执行，以反映出这种变化。较老的版本在复制的时候只启用一个I/O线程，实现这两部分的功能。下面我们来具体演示一下mysql的异步复制。

2.实验拓扑

注，Active (master,node1) 192.168.1.201 ， Passive (slave,node2)192.168.1.202

3.环境配置

时间同步

4.操作系统

• CentOS 6.4 X86_64

5.软件版本

• Mysql 5.5.33 (注，这里用的是mysql 5.5.33二进制通用安装包，解压就能用)

6.安装并配置mysql

master:

(1).解压并链接

(2).新建mysql用户

(3).修改mysql安装目录所有者与所属组

(4).为mysql提供配置文件并修改

(5).为mysql提供启动脚本

(6).初始化mysql数据库

(7).启动并测试

好了，到这里master的mysql配置完成，下面我们进行slave的mysql配置。

slave:

(1).解压并链接

(2).新建mysql用户

(3).修改mysql安装目录所有者与所属组

(4).为mysql提供配置文件并修改

(5).为mysql提供启动脚本

(6).初始化mysql数据库

(7).启动并测试

好了，slave的mysql也配置完成了，下面我们来配置主从复制。

7.配置master

(1).修改配置文件

(2).授权复制用户

(3).重启一下mysql服务

8.配置slave

(1).修改配置文件

(2).重启mysql服务

(3).连接主服务器并复制