Mysql 复制(Replication)实现
2012-05-24 14:28
281 查看
个人需要做一个小工程,需要将3台Mysql服务器的数据进行同步操作,经过上网查资料,并进行了实际操作完成了基本构思。
首先准备了3台Centos6.2,搭配了Apache Mysql PHP 等基本Webserver配置
3台机分别是Master A:192.168.1.49
Slave B1:192.168.1.50
B2:192.168.1.51
我需要的环境是单向复制,从复制A的数据到B1和B2.令3台机的数据一致。
配置逻辑:
从高层来看,复制分成三步:
(1) master将改变记录到二进制日志(binary log)中(这些记录叫做二进制日志事件,binary log events);
(2) slave将master的binary log events拷贝到它的中继日志(relay log);
(3) slave重做中继日志中的事件,将改变反映它自己的数据。
开始配置:
第一步:创建复制帐号
每个slave使用标准的MySQL用户名和密码连接master。进行复制操作的用户会授予REPLICATIONSLAVE权限。
用户名的密码都会存储在文本文件master.info中。假如,你想创建repl用户,如下:
第二步:配置My.cnf
配置Master的My.cnf,该文件默认位置为/etc/my.cnf
接下来对master进行配置,包括打开二进制日志,指定唯一的servr ID。例如,在配置文件加入如下值:
[mysqld]
log-bin=mysql-bin
server-id=10
重启master,运行SHOW MASTER STATUS,输出如下:
配置Slave的My.cnf,该文件默认位置为/etc/my.cnf
Slave的配置与master类似,你同样需要重启slave的MySQL。如下:
log_bin = mysql-bin
server_id = 2
relay_log = mysql-relay-bin
log_slave_updates = 1
read_only = 1
server_id是必须的,而且唯一。slave没有必要开启二进制日志,但是在一些情况下,必须设置,例如,如果slave为其它slave的master,必须设置bin_log。在这里,我们开启了二进制日志,而且显示的命名(默认名称为hostname,但是,如果hostname改变则会出现问题)。
relay_log配置中继日志,log_slave_updates表示slave将复制事件写进自己的二进制日志(后面会看到它的用处)。
有些人开启了slave的二进制日志,却没有设置log_slave_updates,然后查看slave的数据是否改变,这是一种错误的配置。所以,尽量使用read_only,它防止改变数据(除了特殊的线程)。但是,read_only并是很实用,特别是那些需要在slave上创建表的应用。
第三步:启动slave
接下来就是让slave连接master,并开始重做master二进制日志中的事件。你不应该用配置文件进行该操作,而应该使用CHANGE MASTER TO语句,该语句可以完全取代对配置文件的修改,而且它可以为slave指定不同的master,而不需要停止服务器。如下:
MASTER_LOG_POS的值为0,因为它是日志的开始位置。然后,你可以用SHOW SLAVE STATUS语句查看slave的设置是否正确:
Slave_IO_State, Slave_IO_Running, 和Slave_SQL_Running表明slave还没有开始复制过程。日志的位置为4而不是0,这是因为0只是日志文件的开始位置,并不是日志位置。实际上,MySQL知道的第一个事件的位置是4。
为了开始复制,你可以运行:
注意,slave的I/O和SQL线程都已经开始运行,而且Seconds_Behind_Master不再是NULL。日志的位置增加了,意味着一些事件被获取并执行了。如果你在master上进行修改,你可以在slave上看到各种日志文件的位置的变化,同样,你也可以看到数据库中数据的变化。
你可查看master和slave上线程的状态。在master上,你可以看到slave的I/O线程创建的连接:
基本到这里就完成,至于后期的加强操作,我会在另行添加。
Mysql复制的时候可以做到限制复制(主)
另外还有几条常用的命令
1.现将Master的数据库锁定,以免数据复制的时候出现差异。
2.
在另一个连接用mysqldump创建一个你想进行复制的数据库的转储:
3.
对表释放锁。
上面方法中,第2部需要将数据库复制到新slave中还原,这样,Master和新Slave的数据源就一致。
其实第2部的方法有很多,也可以使用Mysql软件进行同步,例如:Navicat for Mysql
方法不是唯一,只要结果一致即可。
4.完成旧数据同步后,Master中输入
5.然后在根据上表中内容输入上文启动Slave步骤的内容。
6.启动slave
7.启动完成后进行检查。
完成
测试过程要主要的问题:
1.请先配置好Mysql
2.开通复制前请将Mysql的库和表的框架复制过去。(在测试一下能不能连表都复制过去!)
首先准备了3台Centos6.2,搭配了Apache Mysql PHP 等基本Webserver配置
3台机分别是Master A:192.168.1.49
Slave B1:192.168.1.50
B2:192.168.1.51
我需要的环境是单向复制,从复制A的数据到B1和B2.令3台机的数据一致。
配置逻辑:
从高层来看,复制分成三步:
(1) master将改变记录到二进制日志(binary log)中(这些记录叫做二进制日志事件,binary log events);
(2) slave将master的binary log events拷贝到它的中继日志(relay log);
(3) slave重做中继日志中的事件,将改变反映它自己的数据。
开始配置:
第一步:创建复制帐号
每个slave使用标准的MySQL用户名和密码连接master。进行复制操作的用户会授予REPLICATIONSLAVE权限。
用户名的密码都会存储在文本文件master.info中。假如,你想创建repl用户,如下:
mysql> GRANT REPLICATION SLAVE, REPLICATION CLIENT ON *.* -> TO repl@'192.168.1.%' IDENTIFIED BY '123456';
第二步:配置My.cnf
配置Master的My.cnf,该文件默认位置为/etc/my.cnf
接下来对master进行配置,包括打开二进制日志,指定唯一的servr ID。例如,在配置文件加入如下值:
[mysqld]
log-bin=mysql-bin
server-id=10
重启master,运行SHOW MASTER STATUS,输出如下:
配置Slave的My.cnf,该文件默认位置为/etc/my.cnf
Slave的配置与master类似,你同样需要重启slave的MySQL。如下:
log_bin = mysql-bin
server_id = 2
relay_log = mysql-relay-bin
log_slave_updates = 1
read_only = 1
server_id是必须的,而且唯一。slave没有必要开启二进制日志,但是在一些情况下,必须设置,例如,如果slave为其它slave的master,必须设置bin_log。在这里,我们开启了二进制日志,而且显示的命名(默认名称为hostname,但是,如果hostname改变则会出现问题)。
relay_log配置中继日志,log_slave_updates表示slave将复制事件写进自己的二进制日志(后面会看到它的用处)。
有些人开启了slave的二进制日志,却没有设置log_slave_updates,然后查看slave的数据是否改变,这是一种错误的配置。所以,尽量使用read_only,它防止改变数据(除了特殊的线程)。但是,read_only并是很实用,特别是那些需要在slave上创建表的应用。
第三步:启动slave
接下来就是让slave连接master,并开始重做master二进制日志中的事件。你不应该用配置文件进行该操作,而应该使用CHANGE MASTER TO语句,该语句可以完全取代对配置文件的修改,而且它可以为slave指定不同的master,而不需要停止服务器。如下:
mysql> CHANGE MASTER TO MASTER_HOST='192.168.1.49', -> MASTER_USER='repl', -> MASTER_PASSWORD='123456', -> MASTER_LOG_FILE='mysql-bin.000001', -> MASTER_LOG_POS=0;
MASTER_LOG_POS的值为0,因为它是日志的开始位置。然后,你可以用SHOW SLAVE STATUS语句查看slave的设置是否正确:
mysql> SHOW SLAVE STATUS\G *************************** 1. row *************************** Slave_IO_State: Master_Host: server1 Master_User: repl Master_Port: 3306 Connect_Retry: 60 Master_Log_File: mysql-bin.000001 Read_Master_Log_Pos: 4 Relay_Log_File: mysql-relay-bin.000001 Relay_Log_Pos: 4 Relay_Master_Log_File: mysql-bin.000001 Slave_IO_Running: No Slave_SQL_Running: No ...omitted... Seconds_Behind_Master: NULL
Slave_IO_State, Slave_IO_Running, 和Slave_SQL_Running表明slave还没有开始复制过程。日志的位置为4而不是0,这是因为0只是日志文件的开始位置,并不是日志位置。实际上,MySQL知道的第一个事件的位置是4。
为了开始复制,你可以运行:
mysql> START SLAVE; mysql> SHOW SLAVE STATUS\G 运行SHOW SLAVE STATUS查看输出结果: *************************** 1. row *************************** Slave_IO_State: Waiting for master to send event Master_Host: server1 Master_User: repl Master_Port: 3306 Connect_Retry: 60 Master_Log_File: mysql-bin.000001 Read_Master_Log_Pos: 164 Relay_Log_File: mysql-relay-bin.000001 Relay_Log_Pos: 164 Relay_Master_Log_File: mysql-bin.000001 Slave_IO_Running: Yes Slave_SQL_Running: Yes ...omitted... Seconds_Behind_Master: 0
注意,slave的I/O和SQL线程都已经开始运行,而且Seconds_Behind_Master不再是NULL。日志的位置增加了,意味着一些事件被获取并执行了。如果你在master上进行修改,你可以在slave上看到各种日志文件的位置的变化,同样,你也可以看到数据库中数据的变化。
你可查看master和slave上线程的状态。在master上,你可以看到slave的I/O线程创建的连接:
mysql> show processlist \G *************************** 1. row *************************** Id: 1 User: root Host: localhost:2096 db: test Command: Query Time: 0 State: NULL Info: show processlist *************************** 2. row *************************** Id: 2 User: repl Host: localhost:2144 db: NULL Command: Binlog Dump Time: 1838 State: Has sent all binlog to slave; waiting for binlog to be updated Info: NULL 2 rows in set (0.00 sec)
基本到这里就完成,至于后期的加强操作,我会在另行添加。
Mysql复制的时候可以做到限制复制(主)
binlog-do-db=work #只复制 binlog_ignore_db=mysql #不允许复制
Replicate_Do_DB=mysql replicate-ignore-db=mysql
另外还有几条常用的命令
start slave; #开始服务 reset slave; #重设服务 stop slave; #停止服务
上面复制方式是假设在新设Master和slave的情况下,实际环境并不十分实用,例如,你在一组运行了很久的Master中加入一个新的slave呢?
这样我们就需要优先进行数据处理。1.现将Master的数据库锁定,以免数据复制的时候出现差异。
FLUSH TABLES WITH READ LOCK;
2.
在另一个连接用mysqldump创建一个你想进行复制的数据库的转储:
shell> mysqldump --all-databases --lock-all-tables >dbdump.db
3.
对表释放锁。
mysql> UNLOCK TABLES;
上面方法中,第2部需要将数据库复制到新slave中还原,这样,Master和新Slave的数据源就一致。
其实第2部的方法有很多,也可以使用Mysql软件进行同步,例如:Navicat for Mysql
方法不是唯一,只要结果一致即可。
4.完成旧数据同步后,Master中输入
mysql> show master status; ##得到: +------------------+----------+--------------+---------------------------+ | File | Position | Binlog_Do_DB | Binlog_Ignore_DB | +------------------+----------+--------------+---------------------------+ | mysql-bin.000024 | 38113 | | mysql,test | +------------------+----------+--------------+---------------------------+ 1 row in set (0.00 sec)
5.然后在根据上表中内容输入上文启动Slave步骤的内容。
mysql> CHANGE MASTER TO MASTER_HOST='192.168.1.49', -> MASTER_USER='repl', -> MASTER_PASSWORD='123456', -> MASTER_LOG_FILE='mysql-bin.000001', -> MASTER_LOG_POS=38113;
6.启动slave
START SLAVE;
7.启动完成后进行检查。
mysql> SHOW SLAVE STATUS\G *************************** 1. row *************************** Slave_IO_State: Waiting for master to send event Master_Host: 192.168.1.171 Master_User: repl Master_Port: 3306 Connect_Retry: 60 Master_Log_File: mysql-bin.000024 Read_Master_Log_Pos: 38255 Relay_Log_File: mysql-relay-bin.000002 Relay_Log_Pos: 393 Relay_Master_Log_File: mysql-bin.000024 Slave_IO_Running: Yes Slave_SQL_Running: Yes Replicate_Do_DB: Replicate_Ignore_DB: mysql,wdcpdb,mysql,wdcpdb Replicate_Do_Table: Replicate_Ignore_Table: Replicate_Wild_Do_Table: Replicate_Wild_Ignore_Table: Last_Errno: 0 Last_Error: Skip_Counter: 0 Exec_Master_Log_Pos: 38255 Relay_Log_Space: 548 Until_Condition: None Until_Log_File: Until_Log_Pos: 0 Master_SSL_Allowed: No Master_SSL_CA_File: Master_SSL_CA_Path: Master_SSL_Cert: Master_SSL_Cipher: Master_SSL_Key: Seconds_Behind_Master: 0 Master_SSL_Verify_Server_Cert: No Last_IO_Errno: 0 Last_IO_Error: Last_SQL_Errno: 0 Last_SQL_Error: 1 row in set (0.00 sec)
完成
测试过程要主要的问题:
1.请先配置好Mysql
2.开通复制前请将Mysql的库和表的框架复制过去。(在测试一下能不能连表都复制过去!)
相关文章推荐
- mysql基于replication实现最简单的M-S主从复制
- MySQL 备份和恢复策略四:使用主从复制机制(replication)实现数据库实时备份
- InnoSQL HA Suite的实现原理与配置说明 InnoSQL的VSR功能Virtual Sync Replication MySQL 5.5版本引入了半同步复制(semi-sync replicaiton)的功能 MySQL 5.6支持了crash safe功能
- 分布式架构高可用架构篇_08_MyCat在MySQL主从复制基础上实现读写分离
- Mysql常用主从复制架构以及MHA高可用的主从复制的实现
- MySql主从搭建、复制及配置实现
- MySQL主从复制实现基于日志点的复制
- 高可用架构篇--MyCat在MySQL主从复制基础上实现读写分离
- 从零开始,通过docker实现mysql 主从复制,图文并茂,保证可以实现!
- mysql实现简单的基于日志点的主从复制
- Mysql的AB复制(主从复制)原理及实现
- 使用Spring实现读写分离( MySQL实现主从复制)
- mysql 主从复制读写分离实现
- Xshell远程管理MySQL服务器如何实现选择自动复制以及右键自动粘贴的设置!
- mysql主从复制实现数据库同步
- 高可用架构篇--MyCat在MySQL主从复制基础上实现读写分离
- mysql主从复制,半同步,主主复制架构的实现
- 理解MySQL——复制(Replication)
- mysql主从复制实现(基于mysql5.5版本)
- mysql5.6 主从复制事件校验 mysql Replication Event Checksum