新特性解读 | InnoDB ReplicaSet：MySQL 副本集初体验

头像
爱可生开源社区
    阅读 8 分钟
    作者：任仲禹

    一、InnoDB ReplicaSet 介绍

    • MySQL 副本集（官方名称：MySQL InnoDB ReplicaSet）在 MySQL 8.0.19 版本（2020-01-13 Released）之后开始支持，本质还是是基于 GTID 的异步复制

    • 角色分为 Primary 和 Secondary

      • Primary 即传统意义上的 Master，一个副本集只允许一个
      • Secondary 即 Slave，允许一个或多个
    • 通过 MySQL Shell 自带的 AdminAPI 创建、配置、删除等管理副本集
    • 通过 MySQL Router 使用副本集，引导与连接方式与 InnoDB Cluster 和 MGR 有点类似，不同之处在于新增了 cluster_type = rs 集群类型。

    二、通过 MySQL Shell 部署 Sandbox 实例

    • MySQL Shell 除了集成 AdminAPI 外还提供了 MySQL Sandbox 功能，可轻松部署用以测试的 MySQL 数据库实例
    • 通过 Sandbox 一键部署三个 MySQL 实例
    # mysqlsh
 MySQL  JS > dba.deploySandboxInstance(3306)
 MySQL  JS > dba.deploySandboxInstance(3307)
 MySQL  JS > dba.deploySandboxInstance(3308)
    • 指定 root 密码后自动创建 MySQL 实例，默认数据目录在 $HOME/mysql-sandboxes/port

    图片1.png

    三、通过 MySQL Shell 配置 InnoDB 副本集

    3.1 创建集群管理账户

    • 创建集群管理员账户 repl 作为具有管理 InnoDB ReplicaSet 所需的权限集合
     MySQL  JS > dba.configureReplicaSetInstance('root@localhost:3306', {clusterAdmin: "'repl'@'%'", clusterAdminPassword: 'repl'});

    图片2.png

    3.2 创建 InnoDB 副本集

    • 连接到第一个 MySQL 实例 3306，创建命名为 renzy 的副本集
     MySQL  JS > \connect root@localhost:3306
 MySQL  localhost:3306 ssl  JS > var rs = dba.createReplicaSet("renzy")

    图片3.png

    • 查看副本集状态，默认第一个实例 3306 选举为 Primary 节点
     MySQL  localhost:3306 ssl  JS > rs.status()
{
    "replicaSet": {
        "name": "renzy",
        "primary": "127.0.0.1:3306",
        "status": "AVAILABLE",
        "statusText": "All instances available.",
        "topology": {
            "127.0.0.1:3306": {
                "address": "127.0.0.1:3306",
                "instanceRole": "PRIMARY",
                "mode": "R/W",
                "status": "ONLINE"
            }
        },
        "type": "ASYNC"
    }
}

    3.3 添加节点到副本集

     MySQL  localhost:3306 ssl  JS > rs.addInstance('localhost:3307')
 MySQL  localhost:3306 ssl  JS > rs.addInstance('localhost:3308')
    • 添加节点 3307 和 3308 到副本集涉及到数据拷贝有两种方式：Clone 全量同步和 Inremental recovery 增量同步，本文使用 Clone 全量同步方式从 Primary 节点全量同步数据

    图片4.png

    • 查看副本集状态，已添加到副本集的实例 3307 和 3308 的角色为 Secondary ，并自动与 Primary 节点 3306 建立复制关系
     MySQL  localhost:3306 ssl  JS > rs.status()
{
    "replicaSet": {
        "name": "renzy",
        "primary": "127.0.0.1:3306",
        "status": "AVAILABLE",
        "statusText": "All instances available.",
        "topology": {
            "127.0.0.1:3306": {
                "address": "127.0.0.1:3306",
                "instanceRole": "PRIMARY",
                "mode": "R/W",
                "status": "ONLINE"
            },
            "127.0.0.1:3307": {
                "address": "127.0.0.1:3307",
                "instanceRole": "SECONDARY",
                "mode": "R/O",
                "replication": {
                    "applierStatus": "APPLIED_ALL",
                    "applierThreadState": "Slave has read all relay log; waiting for more updates",
                    "receiverStatus": "ON",
                    "receiverThreadState": "Waiting for master to send event",
                    "replicationLag": null
                },
                "status": "ONLINE"
            },
            "127.0.0.1:3308": {
                "address": "127.0.0.1:3308",
                "instanceRole": "SECONDARY",
                "mode": "R/O",
                "replication": {
                    "applierStatus": "APPLIED_ALL",
                    "applierThreadState": "Slave has read all relay log; waiting for more updates",
                    "receiverStatus": "ON",
                    "receiverThreadState": "Waiting for master to send event",
                    "replicationLag": null
                },
                "status": "ONLINE"
            }
        },
        "type": "ASYNC"
    }
}

    3.4 副本集在线主从切换

    • 手工在线将实例 3308 切换为 Primary 节点
     MySQL  localhost:3306 ssl  JS > rs.setPrimaryInstance('127.0.0.1:3308')
    • 实例 3308 被提升为 Primary 后，副本集将自动将 实例 3306 降级为 Secondary 并与 3308 建立复制关系，副本集中其它实例 3307 也将自动与 3308 建立复制与同步
     MySQL  localhost:3306 ssl  JS > rs.status()
{
    "replicaSet": {
        "name": "renzy",
        "primary": "127.0.0.1:3308",
        "status": "AVAILABLE",
        "statusText": "All instances available.",
        "topology": {
            "127.0.0.1:3306": {
                "address": "127.0.0.1:3306",
                "instanceRole": "SECONDARY",
                "mode": "R/O",
                "replication": {
                    "applierStatus": "APPLIED_ALL",
                    "applierThreadState": "Slave has read all relay log; waiting for more updates",
                    "receiverStatus": "ON",
                    "receiverThreadState": "Waiting for master to send event",
                    "replicationLag": null
                },
                "status": "ONLINE"
            },
            "127.0.0.1:3307": {
                "address": "127.0.0.1:3307",
                "instanceRole": "SECONDARY",
                "mode": "R/O",
                "replication": {
                    "applierStatus": "APPLIED_ALL",
                    "applierThreadState": "Slave has read all relay log; waiting for more updates",
                    "receiverStatus": "ON",
                    "receiverThreadState": "Waiting for master to send event",
                    "replicationLag": null
                },
                "status": "ONLINE"
            },
            "127.0.0.1:3308": {
                "address": "127.0.0.1:3308",
                "instanceRole": "PRIMARY",
                "mode": "R/W",
                "status": "ONLINE"
            }
        },
        "type": "ASYNC"
    }
}

    3.5 副本集 Primary 节点故障

    • 手工杀掉 Primary 节点进程
    # ps -ef | grep 3308
root     18975     1  0 16:52 ?        00:01:23 /root/mysql-sandboxes/3308/bin/mysqld --defaults-file=/root/mysql-sandboxes/3308/my.cnf --user=root
# kill -9 18975
    • 副本集 无法自动进行故障转移，需要人工介入修复

    图片5.png

    • 手工将 Secondary 节点 3306 强制提升为 Primary 
     MySQL  localhost:3306 ssl  JS > rs.forcePrimaryInstance("127.0.0.1:3306")
    • 副本集恢复后，因 3308 不可用副本集状态显示为 AVAIABLE_PARITAL (部分可用)

    图片6.png

    四、通过 MySQL Router 使用副本集

    • 与使用 MySQL Router 连接 MGR 或 InnoDB Cluster 一样，副本集也可以通过 MySQL Router 访问，首先通过 --bootstrap 选项引导副本集
    mysqlrouter --user=root --bootstrap root@localhost:3308

    图片7.png

    五、MySQL Router 通过 R/W 自动连接到 Primary

    • 启动 MySQL Router
    mysqlrouter -c /usr/local/mysql-router-8.0.19-linux-glibc2.12-x86_64/mysqlrouter.conf &

// 通过 MySQL Router R/W 端口可以自动识别并连接到 Primary
# mysql -h10.186.63.158 -P6446 -uroot -proot -e 'select @@port;'
mysql: [Warning] Using a password on the command line interface can be insecure.
+--------+
| @@port |
+--------+
|   3308 |
+--------+
# mysql -h10.186.63.158 -P6446 -uroot -proot -e 'show slave hosts;'
mysql: [Warning] Using a password on the command line interface can be insecure.
+------------+-----------+------+------------+--------------------------------------+
| Server_id  | Host      | Port | Master_id  | Slave_UUID                           |
+------------+-----------+------+------------+--------------------------------------+
| 1587786506 | 127.0.0.1 | 3307 | 2457151498 | cb569215-3b29-11ea-80f4-02000aba3f9e |
| 3616586416 | 127.0.0.1 | 3306 | 2457151498 | c23ee4be-3b29-11ea-815a-02000aba3f9e |
+------------+-----------+------+------------+--------------------------------------+
    • 副本集主从切换后，MySQL Router R/W 自动指向被选举出来的新的 Primary

    图片8.png
    图片9.png

    六、结论

    1. MySQL Router 可以很好的兼容 InnoDB ReplicaSet，可自动识别到副本集主从切换，将新的 R/W 连接指向 Primary。
    2. InnoDB ReplicaSet 当前还不完善，可作为新特性在测试环境试用，但因为不支持自动故障转移，Primary 宕机整个副本集将不可用。
    3. InnoDB ReplicaSet 目前仅支持基于 GTID 的异步复制，哪怕支持自动切换，数据也有丢失风险，所以离真正部署到生产环境还有一段路要走。
    4. InnoDB ReplicaSet 暂时还没有类似芒果 DB 完善的投票选举机制，故障切换时也会存在脑裂风险。

    总之，InnoDB 副本集虽存在诸多不足之处，但作为 2020 年 Oracle 的开餐甜点其带来的效果也让众多 MySQL DBA 眼前一亮，既然有了副本集，相信 Sharding 也是未来可期，你觉得呢？

    mysql
    爱可生开源社区
    423 声望205 粉丝

    成立于 2017 年，以开源高质量的运维工具、日常分享技术干货内容、持续的全国性的社区活动为社区己任；目前开源的产品有：SQL审核工具 SQLE，分布式中间件 DBLE、数据传输组件DTLE。

    « 上一篇
    第01问：MySQL 一次 insert 刷几次盘？
    下一篇 »
    故障分析 | MySQL 派生表优化

    引用和评论

    推荐阅读
    头像
    【建议收藏】数据库源码学习调试利器之 CGDB

    爱可生开源社区阅读 172

    头像
    在Java程序中监听mysql的binlog

    huan1993赞 7阅读 1.2k

    头像
    Mysql数据库sql优化案例

    杜若赞 4阅读 1.9k

    头像
    MySQL 亿级数据平滑迁移实战

    vivo互联网技术赞 2阅读 834

    头像
    MySQL间隙锁，next-key锁

    杜若赞 2阅读 9.8k评论 1

    头像
    高效工程师的七个习惯

    Bytebase赞 3阅读 406

    头像
    sqlmap注入语句学习，帮助你排查SQL注入漏洞

    TANKING赞 2阅读 450

    0 条评论
    得票最新