CentOS 8 安装 Percona XtraDB Cluster 8.0

2020-06-22 | 标签: centos, mysql, percona, xtradb, cluster, pxc

前言

CentOS 8 安装 Percona XtraDB Cluster(PXC) 8.0，记录一下安装过程。

主要安装过程 Percona 的官方文档 Percona XtraDB Cluster 8.0 Documentation 已经有描述，本次记录一下步骤。

环境说明

CentOS 8（Minimal Install）

$ cat /etc/centos-release
CentOS Linux release 8.2.2004 (Core)

配置如下

Node	Host	IP Addr	Descprition
Node1	pxc1	10.11.0.84/24	集群节点1
Node2	pxc2	10.11.0.85/24	集群节点2
Node3	pxc3	10.11.0.86/24	集群节点3

说明

Percona XtrDB Cluster 属于 Multi-master Replication（多主复制）。
多主复制意味着支持对任意节点的读写，数据会同步复制到其他节点。
建议不要同时对两个节点上相同的表写入（即写入最好分表或分库）。
对写入的分表或分库，顾名思义，程序连接一个数据库实例进行写入，而不是连接多个数据库实例。

安装

先决条件

先确认每个集群节点的机器名，本文以 pxc1 为例，其他 pxc2, pxc3 相同

$ hostname
pxc1

打开防火墙端口

$ sudo firewall-cmd --permanent --add-port={3306/tcp,4444/tcp,4567/tcp,4568/tcp}
success
$ sudo firewall-cmd --reload
success

重载之后，查看一下防火墙状态

$ sudo firewall-cmd --list-all
public (active)
  target: default
  icmp-block-inversion: no
  interfaces: enp0s3
  sources:
  services: cockpit dhcpv6-client ssh
  ports: 3306/tcp 4444/tcp 4567/tcp 4568/tcp
  protocols:
  masquerade: no
  forward-ports:
  source-ports:
  icmp-blocks:
  rich rules:

将每个集群节点的 SELinux 设置为 permissive 模式

$ sudo vi /etc/selinux/config
SELINUX=permissive

:wq 保存退出后，重启系统。

$ sudo shutdown -r now

重启完操作系统后，确认 SELinux 设置

$ sestatus
SELinux status:                 enabled
SELinuxfs mount:                /sys/fs/selinux
SELinux root directory:         /etc/selinux
Loaded policy name:             targeted
Current mode:                   permissive
Mode from config file:          permissive
Policy MLS status:              enabled
Policy deny_unknown status:     allowed
Memory protection checking:     actual (secure)
Max kernel policy version:      31

从 Percona 仓库安装

先关闭掉默认的 MySQL 模块

$ sudo dnf module disable mysql

配置 yum 源如下，本文以 pxc1 为例，其他 pxc2, pxc3 相同

$ sudo yum install https://repo.percona.com/yum/percona-release-latest.noarch.rpm

之后设置 pxc80 仓库

$ sudo percona-release setup pxc80

这个操作会设置 PXC 的仓库地址为：http://repo.percona.com/pxc-80/yum/release/

安装 Percona XtraDB Cluster

$ sudo yum install percona-xtradb-cluster

修改密码

3 个节点都安装完软件包之后，接下来只对第一个节点 pxc1 进行修改密码操作。

先启动 Percona XtraDB Cluster 服务。

[admin@pxc1 ~] $ sudo systemctl start mysqld

拷贝 MySQL 安装时自动生成的 root 的临时密码

[admin@pxc1 ~] $ sudo grep 'temporary password' /var/log/mysqld.log

使用临时密码登录 MySQL

[admin@pxc1 ~] $ mysql -u root -p

更改 root 用户的密码，之后退出。

mysql> ALTER USER 'root'@'localhost' IDENTIFIED BY 'Passw0rd';
Query OK, 0 rows affected (0.00 sec)

mysql> exit
Bye

关闭 MySQL 服务。

[admin@pxc1 ~] $ sudo systemctl stop mysqld

注意

以上修改密码操作只在第一个节点进行即可。
配置好第二个和第三个节点，启动服务操作后会复制到其他节点中。

配置节点的 Write-set Replication

配置 my.cnf

配置第一个节点 pxc1 的 /etc/my.cnf

[admin@pxc1 ~] sudo vi /etc/my.cnf

内容如下

# Template my.cnf for PXC
# Edit to your requirements.
[client]
socket=/var/lib/mysql/mysql.sock

[mysqld]
server-id=1
datadir=/var/lib/mysql
socket=/var/lib/mysql/mysql.sock
log-error=/var/log/mysqld.log
pid-file=/var/run/mysqld/mysqld.pid

# Binary log expiration period is 604800 seconds, which equals 7 days
binlog_expire_logs_seconds=604800

######## wsrep ###############
# Path to Galera library
wsrep_provider=/usr/lib64/galera4/libgalera_smm.so

# Cluster connection URL contains IPs of nodes
#If no IP is found, this implies that a new cluster needs to be created,
#in order to do that you need to bootstrap this node
wsrep_cluster_address=gcomm://10.11.0.84,10.11.0.85,10.11.0.86

# In order for Galera to work correctly binlog format should be ROW
binlog_format=ROW

# Slave thread to use
wsrep_slave_threads=8

wsrep_log_conflicts

# This changes how InnoDB autoincrement locks are managed and is a requirement for Galera
innodb_autoinc_lock_mode=2

# Node IP address
wsrep_node_address=10.11.0.84
# Cluster name
wsrep_cluster_name=pxc-cluster

#If wsrep_node_name is not specified,  then system hostname will be used
wsrep_node_name=pxc4

#pxc_strict_mode allowed values: DISABLED,PERMISSIVE,ENFORCING,MASTER
pxc_strict_mode=ENFORCING

# SST method
wsrep_sst_method=xtrabackup-v2

pxc-encrypt-cluster-traffic=OFF

主要的需要设置的地方如下：

# 集群通讯地址
wsrep_cluster_address=gcomm://10.11.0.84,10.11.0.85,10.11.0.86
# 本节点的地址
wsrep_node_address=10.11.0.84
# 本节点的名称
wsrep_node_name=pxc1
# 关闭加密
pxc-encrypt-cluster-traffic=OFF

注意本例使用 pxc-encrypt-cluster-traffic=OFF 关闭了传输加密，参考 Encrypting PXC Traffic

这些内容也同样对 pxc2, pxc3 进行配置，只有两个参数 wsrep_node_name, wsrep_node_address 配置的值需要修改一下

对于 pxc2 内容为

wsrep_node_name=pxc2
wsrep_node_address=10.11.0.85
pxc-encrypt-cluster-traffic=OFF

对于 pxc3 内容为

wsrep_node_name=pxc3
wsrep_node_address=10.11.0.86
pxc-encrypt-cluster-traffic=OFF

配置参数说明

wsrep_provider
指定 Galera 库的路径。

wsrep_cluster_name
指定集群的逻辑名称，集群内的所有节点，这个名称必须一致。

wsrep_cluster_address
指定集群内节点的 IP 地址，建议将集群节点都配上。

wsrep_node_name
指定单个节点的逻辑名称，如果没有指定，将使用 hostname 作为逻辑名称。

wsrep_node_address
指定此特定节点的 IP 地址。

wsrep_sst_method
默认的使用 Percona Xtrabackup 进行 State Snapshot Transfer (SST)，强烈建议使用 wsrep_sst_method=xtrabackup-v2

binlog_format
Galera 只支持 row-level replication，默认设置为 binlog_format=ROW。

innodb_autoinc_lock_mode
Galera 只支持 lock mode 为 2 的 InnoDB 引擎，默认设置为 innodb_autoinc_lock_mode=2。

注意 与 Percona XtraDB Cluster 5.7 不同， wsrep_sst_auth 这个参数已经被移除了，可以不用设置。

启动第一个节点

在第一个节点 pxc1 使用如下命令启动

[admin@pxc1 ~]$ sudo systemctl start mysql@bootstrap

使用 bootstrap 模式启动，默认会设置 wsrep_cluster_address=gcomm://，后面没有 IP，表示初始化集群。

为确保初始化完成，可以使用如下命令查看

[admin@pxc1 ~]$ mysql -u root -p
Enter password: 
Welcome to the MySQL monitor.  Commands end with ; or \g.
Your MySQL connection id is 12
Server version: 8.0.19-10 Percona XtraDB Cluster (GPL), Release rel10, Revision 727f180, WSREP version 26.4.3

Copyright (c) 2009-2020 Percona LLC and/or its affiliates
Copyright (c) 2000, 2020, Oracle and/or its affiliates. All rights reserved.

Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.

Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.
myslq> 

之后输入

mysql> show status like 'wsrep%';
+----------------------------------+-----------------------------------------------+
| Variable_name                    | Value                                         |
+----------------------------------+-----------------------------------------------+
| wsrep_local_state_uuid           | 77007d05-777b-11e9-9836-3a33a4649f12          |
| ...                              | ...                                           |
| ...                              | ...                                           |
| wsrep_local_state                | 4                                             |
| wsrep_local_state_comment        | Synced                                        |
| ...                              | ...                                           |
| ...                              | ...                                           |
| wsrep_cluster_size               | 1                                             |
| ...                              | ...                                           |
| wsrep_cluster_status             | Primary                                       |
| wsrep_connected                  | ON                                            |
| ...                              | ...                                           |
| ...                              | ...                                           |
| wsrep_ready                      | ON                                            |
+----------------------------------+-----------------------------------------------+
71 rows in set (0.01 sec)

可以看到集群数量时 1，本节点为 Synced 状态，表示连接成功，并且准备好进行 write-set replication。

添加其他节点

注意

所有其他节点的数据和配置都会被第一个节点的数据覆盖
不要同时加入多个节点，避免数据或网络开销过大

启动第二个节点

[admin@pxc2 ~]$ sudo systemctl start mysqld

启动完成后，pxc2 会接到 pxc1 的数据，可以使用如下命令查看状态

[admin@pxc2 ~]$ mysql -u root -p

登录到 MySQL 后，输入如下命令

mysql> show status like 'wsrep%';
+----------------------------------+--------------------------------------+
| Variable_name                    | Value                                |
+----------------------------------+--------------------------------------+
| wsrep_local_state_uuid           | 33e1e8eb-777b-11e9-b16f-9f9d75d90117 |
| ...                              | ...                                  |
| ...                              | ...                                  |
| wsrep_local_state                | 4                                    |
| wsrep_local_state_comment        | Synced                               |
| ...                              | ...                                  |
| ...                              | ...                                  |
| wsrep_cluster_size               | 2                                    |
| ...                              | ...                                  |
| wsrep_cluster_status             | Primary                              |
| wsrep_connected                  | ON                                   |
| ...                              | ...                                  |
| ...                              | ...                                  |
| wsrep_ready                      | ON                                   |
+----------------------------------+--------------------------------------+
71 rows in set (0.00 sec)

可以看到 wsrep_cluster_size 的值是 2 表示集群已经有 2 个节点了。wsrep_local_state_comment 的值是 Synced 表示已经同步了。

注意 如果 wsrep_local_state_comment 的状态是 Joiner，表示正在同步，请不要启动第三个节点的服务。

启动第三个节点

注意确认好第二个节点的状态为 Synced 后，再启动第三个节点。

步骤与启动第二个节点相同

[admin@pxc3 ~]$ sudo systemctl start mysqld

启动完成后，pxc3 会接到集群，可以使用如下命令查看状态

[admin@pxc3 ~]$ mysql -u root -p

登录到 MySQL 后，输入如下命令

mysql> show status like 'wsrep%';
+----------------------------------+--------------------------------------+
| Variable_name                    | Value                                |
+----------------------------------+--------------------------------------+
| wsrep_local_state_uuid           | 33e1e8eb-777b-11e9-b16f-9f9d75d90117 |
| ...                              | ...                                  |
| ...                              | ...                                  |
| wsrep_local_state                | 4                                    |
| wsrep_local_state_comment        | Synced                               |
| ...                              | ...                                  |
| ...                              | ...                                  |
| wsrep_cluster_size               | 3                                    |
| ...                              | ...                                  |
| wsrep_cluster_status             | Primary                              |
| wsrep_connected                  | ON                                   |
| ...                              | ...                                  |
| ...                              | ...                                  |
| wsrep_ready                      | ON                                   |
+----------------------------------+--------------------------------------+
71 rows in set (0.00 sec)

可以看到集群数量是 3，连接没有问题，准备 write-set replication

验证复制效果

当所有的节点都加入到集群之后，可以验证一下复制效果。

到第二个节点 pxc2 上创建一个新的数据库

mysql@pxc2> CREATE DATABASE percona;
Query OK, 1 row affected (0.18 sec)

到第三个节点 pxc3 上，再这个数据库上新建一个表

mysql@pxc3> USE percona;
Database changed

mysql@pxc3> CREATE TABLE example (node_id INT PRIMARY KEY, node_name VARCHAR(30));
Query OK, 0 rows affected (0.05 sec)

到第一个节点 pxc1 上，插入数据

mysql@pxc1> INSERT INTO percona.example VALUES (1, 'percona1');
Query OK, 1 row affected (0.02 sec)

再到第二个节点 pxc2 上查询一下插入的数据

mysql@pxc2> SELECT * FROM percona.example;
+---------+-----------+
| node_id | node_name |
+---------+-----------+
|       1 | percona1  |
+---------+-----------+
1 row in set (0.01 sec)

可以看到，多主复制很好，而且 3 个节点都是主节点，复制的效果正常。

结束语

Percona XtraDB Cluster 搭建很简单，多主复制很适合高并发环境。

当然，它也是有局限的，具体可以参考：Percona XtraDB Cluster Limitations , 但是这些局限不是太大的问题，因为一般情况不会用到。

参考资料

Percona XtraDB Cluster 8.0 Documentation
Percona XtraDB Cluster Limitations
How to install RHEL 8
Encrypting PXC Traffic

分类: Linux | 评论

前言