MySQL半同步复制及搭建

1、半同步复制介绍

异步复制的问题

普通的replication，即mysql的异步复制，依靠mysql二进制日志也即binary log进行数据复制。比如两台机器，一台主机(master)，另外一台是从机(slave)。

正常的复制为：事务一（t1）写入binlog buffer；dumper 线程通知slave有新的事务t1；binlog buffer 进行checkpoint；slave的io线程接收到t1并写入到自己的的relay log；slave的sql线程写入到本地数据库。 这时，master和slave都能看到这条新的事务，即使master挂了，slave可以提升为新的master。

异常的复制为：事务一（t1）写入binlog buffer；dumper 线程通知slave有新的事务t1；binlog buffer 进行checkpoint；slave因为网络不稳定，一直没有收到t1；master 挂掉，slave提升为新的master，t1丢失。

很大的问题是：主机和从机事务更新的不同步，就算是没有网络或者其他系统的异常，当业务并发上来时，slave因为要顺序执行master批量事务，导致很大的延迟。

半同步复制的引入

为了弥补以上场景的不足，mysql从5.5开始推出了半同步。即在master的dumper线程通知slave后，增加了一个ack，即是否成功收到t1的标志码。也就是dumper线程除了发送t1到slave，还承担了接收slave的ack工作。如果出现异常，没有收到ack，那么将自动降级为普通的复制，直到异常修复。

MySQL 5.5和5.6的半同步复制带来的新问题

如果异常发生，会降级为普通的复制。 那么从机出现数据不一致的几率会减少，并不是完全消失。

主机dumper线程承担的工作变多了，这样显然会降低整个数据库的性能。

在MySQL 5.5和5.6使用after_commit的半同步复制模式下, 即如果slave 没有收到事务，也就是还没有写入到relay log 之前，网络出现异常或者不稳定，此时刚好master挂了，系统切换到从机，两边的数据就会出现不一致。 在此情况下，slave会少一个事务的数据。

MySQL 5.7半同步复制

随着MySQL 5.7版本的发布，半同步复制技术升级为全新的Loss-less Semi-Synchronous Replication架构，其成熟度、数据一致性与执行效率得到显著的提升。

新版本的semi sync 增加了rpl_semi_sync_master_wait_point参数, 来控制半同步模式下主库在返回给会话事务成功之前提交事务的方式。 该参数有两个值：

• AFTER_COMMIT（5.6默认值）
  • master将每个事务写入binlog ,传递到slave 刷新到磁盘(relay log)，同时主库提交事务。
  • master等待slave 反馈收到relay log，只有收到ACK后master才将commit OK结果反馈给客户端。
  • 如图1所示。

图1

• AFTER_SYNC（5.7默认值，但5.6中无此模式）
  • master 将每个事务写入binlog , 传递到slave 刷新到磁盘(relay log)。
  • master等待slave 反馈接收到relay log的ack之后，再提交事务并且返回commit OK结果给客户端。
  • 即使主库crash，所有在主库上已经提交的事务都能保证已经同步到slave的relay log中。
  • 因此5.7引入了after_sync模式，带来的主要收益是解决after_commit导致的master crash主从间数据不一致问题，因此在引入after_sync模式后，所有提交的数据已经都被复制，故障切换时数据一致性将得到提升。
  • 如图2所示。

 图2

2、MySQL5.7 半同步复制搭建（AFTER_SYNC）

搭建环境

master：4核 2G内存 CentOS 6.5 IP：192.168.86.152 主机名：centos65-h1 安装MySQL 5.7.19

slave1：4核 2G内存 CentOS 6.5 IP：192.168.86.153 主机名：centos65-h2 安装MySQL 5.7.19

slave2：4核 2G内存 CentOS 6.5 IP：192.168.86.154 主机名：centos65-h3 安装MySQL 5.7.19

搭建步骤

1、在三台机器上查看是否支持半同步复制（都支持）

1

mysql> select @@have_dynamic_loading;

2

+------------------------+

3

| @@have_dynamic_loading |

4

+------------------------+

5

| YES                    |

6

+------------------------+

7

1 row in set (0.01 sec)

2、查看模块所在的目录以及是否有半同步模块

1

mysql> show variables like '%plugin_dir%';

2

+---------------+------------------------------+

3

| Variable_name | Value                        |

4

+---------------+------------------------------+

5

| plugin_dir    | /usr/local/mysql/lib/plugin/ |

6

+---------------+------------------------------+

7

1 row in set (0.01 sec)

1

[root@centos65-h1 backup]# ls /usr/local/mysql/lib/plugin/ |grep semisync

2

semisync_master.so

3

semisync_slave.so

3、在主库和两台从库上分别加载半同步模块

（对于将来可能被故障切换的主从，都需要加载主和从的插件，对于将来不会成为从的主库来说， 可以只加载主库插件）

1

mysql> install plugin rpl_semi_sync_master SONAME 'semisync_master.so';

1

mysql> install plugin rpl_semi_sync_slave SONAME 'semisync_slave.so';

1

mysql> select * from mysql.plugin;

2

+----------------------+--------------------+

3

| name                 | dl                 |

4

+----------------------+--------------------+

5

| rpl_semi_sync_master | semisync_master.so |

6

| rpl_semi_sync_slave  | semisync_slave.so  |

7

+----------------------+--------------------+

8

2 rows in set (0.00 sec)

4、在主库上开启主库半同步复制以及设置超时时间

1

mysql> set global rpl_semi_sync_master_enabled=1;

2

Query OK, 0 rows affected (0.00 sec)

3

​

4

mysql>  set global rpl_semi_sync_master_timeout=30000;

5

Query OK, 0 rows affected (0.00 sec)

6

​

7

mysql> show variables like '%rpl%';

8

+-------------------------------------------+------------+

9

| Variable_name                             | Value      |

10

+-------------------------------------------+------------+

11

| rpl_semi_sync_master_enabled              | ON         |

12

| rpl_semi_sync_master_timeout              | 30000      |

13

| rpl_semi_sync_master_trace_level          | 32         |

14

| rpl_semi_sync_master_wait_for_slave_count | 1          |

15

| rpl_semi_sync_master_wait_no_slave        | ON         |

16

| rpl_semi_sync_master_wait_point           | AFTER_SYNC |

17

| rpl_semi_sync_slave_enabled               | OFF        |

18

| rpl_semi_sync_slave_trace_level           | 32         |

19

| rpl_stop_slave_timeout                    | 31536000   |

20

+-------------------------------------------+------------+

21

9 rows in set (0.00 sec)

5、在两台从库上开启从库半同步复制

1

mysql>  set global rpl_semi_sync_slave_enabled=1;

2

Query OK, 0 rows affected (0.00 sec)

3

​

4

mysql> show variables like '%rpl%';

5

+-------------------------------------------+------------+

6

| Variable_name                             | Value      |

7

+-------------------------------------------+------------+

8

| rpl_semi_sync_master_enabled              | OFF        |

9

| rpl_semi_sync_master_timeout              | 10000      |

10

| rpl_semi_sync_master_trace_level          | 32         |

11

| rpl_semi_sync_master_wait_for_slave_count | 1          |

12

| rpl_semi_sync_master_wait_no_slave        | ON         |

13

| rpl_semi_sync_master_wait_point           | AFTER_SYNC |

14

| rpl_semi_sync_slave_enabled               | ON         |

15

| rpl_semi_sync_slave_trace_level           | 32         |

16

| rpl_stop_slave_timeout                    | 31536000   |

17

+-------------------------------------------+------------+

18

9 rows in set (0.00 sec)

6、如果之前搭建的主从为异步复制，需要重启从库上的IO线程，如果是全新配置的半同步复制则不需要。

1

mysql> stop slave io_thread;start slave io_thread;

2

Query OK, 0 rows affected (0.00 sec)

3

​

4

Query OK, 0 rows affected (0.00 sec)

7、把半同步参数添加进配置文件中

1

log-bin = mysql-bin //要求所有可能成为主库的节点开启二进制日志

2

relay_log_purge = 0 //要求所有可能成为主库的节点配置 relay_log_purge = 0

3

read_only = 1 //MHA 要求所有 slave 节点配置为 read_only = 1

4

server-id = 2 //注意主从节点的 server-id 不同

5

rpl_semi_sync_master_enabled=1 //在真正的主库上加到配置文件中

6

rpl_semi_sync_master_timeout=1000 //在真正的主库上加到配置文件中

7

rpl_semi_sync_slave_enabled=1 //在从库上加到配置文件中