Skip to content

Latest commit

 

History

History
171 lines (111 loc) · 6.71 KB

README_Chinese.md

File metadata and controls

171 lines (111 loc) · 6.71 KB

介绍

根据博客HA with MySQL Group Replication and ProxySQL的介绍，利用ProxySQL可以为MySQL Group Replication(后面简称MGR) 提供高可用及读写分离方案。这个项目里面主要提供了几个可以被ProxySQL scheduler调度，用于监控MGR成员状态，实现MGR高可用，读写分离且写故障切换功能的脚本。

proxysql_groupreplication_checker.sh

脚本修改自 : https://github.com/lefred/proxysql_groupreplication_checker，提供了MGR Multi-Primary 模式下读写分离功能，以及写节点故障切换功能。

特性和限制

特性

  • 读写分离
  • 同一时刻可以有多个写节点
  • 写节点故障切换

限制

  • MGR只能是Multi-Primary Mode。

目前，MGR多写特性仍然不够完善，在多个节点并发写很可能出现写冲突，因此，在实际应用中，我们的场景是: 只有一个节点用于写，其他节点用于读。

同时我们要支持MGR的两种模式: Multi-Primary Mode和Single-Primary Mode

于是，就诞生了接下来的两个脚本:

Tip: 后面脚本的设计灵感来自这个示例脚本

gr_mw_mode_sw_cheker.sh

实现Multi-Primary Mode下的MySQL Group Replication高可用和读写分离的脚本，限制只能有一个节点用于写。

特性和限制

特性

  • 读写分离
  • 写节点故障自动切换

限制

  • MGR必须部署于Multi-Primary Mode
  • 只有一个节点用于写

配置方式

假设我们已经部署了一个3节点组成的MGR集群，模式为Multi-Primary：

mysql> SELECT * FROM performance_schema.replication_group_members;
+---------------------------+--------------------------------------+-------------+-------------+--------------+
| CHANNEL_NAME              | MEMBER_ID                            | MEMBER_HOST | MEMBER_PORT | MEMBER_STATE |
+---------------------------+--------------------------------------+-------------+-------------+--------------+
| group_replication_applier | 4a48f63a-d47b-11e6-a16f-a434d920fb4d | CrazyPig-PC |       24801 | ONLINE       |
| group_replication_applier | 592b4ea5-d47b-11e6-a3cd-a434d920fb4d | CrazyPig-PC |       24802 | ONLINE       |
| group_replication_applier | 6610aa92-d47b-11e6-a60e-a434d920fb4d | CrazyPig-PC |       24803 | ONLINE       |
+---------------------------+--------------------------------------+-------------+-------------+--------------+
3 rows in set (0.00 sec)

并且，已经成功的在同一台机器上部署了ProxySQL(version 1.3.2)，并成功运行。

现在我们需要配置MGR和ProxySQL，让它们能够共同协作，实现高可用和读写分离:

1) MGR节点创建ProxySQL能够连接和执行SELECT操作的用户

在所有的MGR节点上，执行:

set SQL_LOG_BIN=0;
grant SELECT on *.* to 'proxysql'@'%' identified by 'proxysql';
flush privileges;
set SET SQL_LOG_BIN=1;

2) MGR节点创建定制的自定义函数和视图

这些自定义函数和视图会被脚本所使用，提供MGR节点状态的相关指标。在所有的MGR节点上执行https://github.com/lefred/mysql_gr_routing_check/blob/master/addition_to_sys.sql提供的脚本。

3) 配置proxysql

将MGR节点信息写入proxysql mysql_servers表:

insert into mysql_servers (hostgroup_id, hostname, port) values(1, '127.0.0.1', 24801);
insert into mysql_servers (hostgroup_id, hostname, port) values(2, '127.0.0.1', 24801);
insert into mysql_servers (hostgroup_id, hostname, port) values(2, '127.0.0.1', 24802);
insert into mysql_servers (hostgroup_id, hostname, port) values(2, '127.0.0.1', 24803);

hostgroup_id = 1代表write group，针对我们提出的限制，这个地方只配置了一个节点；hostgroup_id = 2代表read group，包含了MGR的所有节点。

然后，加入读写分离规则，让所有的SELECT操作路由到hostgroup_id为2的hostgroup:

insert into mysql_query_rules (active, match_pattern, destination_hostgroup, apply) 
values (1,"^SELECT",2,1);

这么做会引起所有的SELECT .. FOR UPDATE也发到hostgroup_id为2的hostgroup，更细粒度的正则表达式能够避免这个情况，这里不讨论这个细粒度的实现。

接下来我们需要修改proxysql的监控用户和密码为我们上面 step 1) 提供的用户和密码。

UPDATE global_variables SET variable_value='proxysql' WHERE variable_name='mysql-monitor_username';
UPDATE global_variables SET variable_value='proxysql' WHERE variable_name='mysql-monitor_password';

最后我们需要将global_variables，mysql_servers和mysql_query_rules表的信息加载到RUNTIME，更进一步加载到DISK:

LOAD MYSQL VARIABLES TO RUNTIME;
SAVE MYSQL VARIABLES TO DISK;
LOAD MYSQL SERVERS TO RUNTIME;
SAVE MYSQL SERVERS TO DISK;
LOAD MYSQL QUERY RULES TO RUNTIME;
SAVE MYSQL QUERY RULES TO DISK;

4) 配置scheduler

首先，将我们提供的脚本gr_mw_mode_sw_cheker.sh放到目录/var/lib/proxysql/下

最后，我们在proxysql的scheduler表里面加载如下记录，然后加载到RUNTIME使其生效，同时还可以持久化到磁盘:

insert into scheduler(id, active, interval_ms, filename, arg1, arg2, arg3, arg4)
  values(1, 1, 5000, '/var/lib/proxysql/gr_mw_mode_sw_checker.sh', 1, 2, 1, '/var/lib/proxysql/checker.log');

LOAD SCHEDULER TO RUNTIME;
SAVE SCHEDULER TO DISK;
  • active : 1: 表示使脚本调度生效
  • interval_ms : 每隔多长时间执行一次脚本 (eg: 5000(ms) = 5s 表示每隔5s脚本被调用一次)
  • filename: 指定脚本所在的具体路径，如上面的/var/lib/proxysql/checker.log
  • arg1~arg4: 指定传递给脚本的参数

脚本及对应的参数说明如下:

gr_mw_mode_sw_cheker.sh writehostgroup_id readhostgroup_id [writeNodeCanRead] [log file]
  • arg1 -> 指定writehostgroup_id
  • arg2 -> 指定readhostgroup_id
  • arg3 -> 写节点是否可以用于读, 1(YES, the default value), 0(NO)
  • arg4 -> log file, default: './checker.log'

gr_sw_mode_checker.sh

实现Single-Primary Mode下的MySQL Group Replication高可用和读写分离的脚本，限制只能有一个节点用于写。

特性与限制

特性

  • 读写分离
  • 写节点故障自动切换

当写节点故障，脚本会寻找下一个真正的写节点，进行故障切换，这个过程比Multi-Primary Mode要复杂些。

限制

  • MGR必须部署在Single-Primary模式
  • 同一时间只有一个节点用于写

配置方式

与上一个脚本gr_mw_mode_sw_cheker.sh的部署方式基本一致，只是在 step 4) 中将脚本替换为gr_sw_mode_checker.sh