MySQL主从同步备份策略分享

2022-11-12 09:23:12
内容摘要
这篇文章主要为大家详细介绍了MySQL主从同步备份策略分享,具有一定的参考价值,可以用来参考一下。 对此感兴趣的朋友,看看idc笔记做的技术笔记!环境:主从服务器上的MySQL数据库
文章正文

这篇文章主要为大家详细介绍了MySQL主从同步备份策略分享,具有一定的参考价值,可以用来参考一下。

对此感兴趣的朋友,看看idc笔记做的技术笔记!

环境:主从服务器上的MySQL数据库版本同为5.1.34主机IP192.168.0.1从机IP192.168.0.2.MySQL主服务器配置1.编辑配置文件/etc/my.cnf#确保有如下行server-id=1log-bin=mysql-binbinlog-do-db=mysql#需要备份的数据库名,如果备份多个数据库,重复设置这个选项即可binlog-ignore-db=mysql#不需要备份的数据库名,如果备份多个数据库,重复设置这个选项即可log-slave-updates#这个参数一定要加上,否则不会给更新的记录些到二进制文件里slave-skip-errors#是跳过错误,继续执行复制操作2.建立用户mysql>grantreplicationslaveon*.*toslave@192.168.0.2identifiedby‘111111′;#grantreplicationslaveon*.*to用户名'@'主机'identifiedby密码';#可在Slave上做连接测试:mysql-h192.168.0.1-utest-p3.锁主库表mysql>FLUSHTABLESWITHREADLOCK;4.显示主库信息记录FilePosition,从库设置将会用到=====================mysql>SHOWMASTERSTATUS;+------------------+----------+--------------+------------------+|File|Position|Binlog_do_db|Binlog_ignore_db|+------------------+----------+--------------+------------------+|mysql-bin.000001|106|||+------------------+----------+--------------+------------------+5.另开一个终端,打包主库cd/usr/local/mysql#mysql库目录tarzcvfvar.tar.gzvar============================二.MySQL从服务器配置1、传输拿到主库数据包、解包#cd/usr/local/mysql#scp192.168.0.1:/usr/local/mysql/var.tar.gz.#tarzxvfvar.tar.gz2、查看修改var文件夹权限#chown-Rmysql:mysqlvar3.编辑/etc/my.cnfserver-id=2log-bin=mysql-binmaster-host=192.168.0.1master-user=slavemaster-password=111111master-port=3306replicate-do-db=test#需要备份的数据库名replicate-ignore-db=mysql#忽略的数据库master-connect-retry=60#如果从服务器发现主服务器断掉,重新连接的时间差()log-slave-updates#这个参数一定要加上,否则不会给更新的记录些到二进制文件里slave-skip-errors#是跳过错误,继续执行复制操作4、验证连接MASTER#mysql-h192.168.0.1-uslave-ppasswordmysql>showgrantsforslave@192.168.0.2;5、在SLAVE上设置同步设置连接MASTERMASTER_LOG_FILE为主库的FileMASTER_LOG_POS为主库的Position============================mysql>slavestop;mysql>CHANGEMASTERTOMASTER_HOST='192.168.0.1',MASTER_USER='slave',MASTER_PASSWORD='111111',MASTER_LOG_FILE='mysql-bin.000001',MASTER_LOG_POS=106;6、启动SLAVE服务mysql>slavestart;7、查看SLAVE状态mysql>SHOWSLAVESTATUS\G;其中Slave_IO_RunningSlave_SQL_Running两列的值都为"Yes",表明SlaveI/OSQL线程都在正常运行。8、解锁主库表mysql>UNLOCKTABLES;到此主从库搭建成功。可以在主库上插入数据测试同步是否正常。--------------------------附:一些错误信息的处理,主从服务器上的命令,及状态信息。在从服务器上使用showslavestatus\GSlave_IO_Running,No,则说明IO_THREAD没有启动,请执行startslaveio_threadSlave_SQL_RunningNo则复制出错,查看Last_error字段排除错误后执行startslavesql_thread查看Slave_IO_State字段空//复制没有启动Connectingtomaster//没有连接上masterWaitingformastertosendevent//已经连上主服务器上的相关命令:showmasterstatusshowslavehostsshowlogsshowbinlogeventspurgelogsto'log_name'purgelogsbefore'date'resetmaster(老版本flushmaster)setsql_log_bin=从服务器上的相关命令:slavestartslavestopSLAVESTOPIO_THREAD//此线程把master段的日志写到本地SLAVEstartIO_THREADSLAVESTOPSQL_THREAD//此线程把写到本地的日志应用于数据库SLAVEstartSQL_THREADresetslaveSETGLOBALSQL_SLAVE_SKIP_COUNTERloaddatafrommastershowslavestatus(SUPER,REPLICATIONCLIENT)CHANGEMASTERTOMASTER_HOST=,MASTER_PORT=,MASTER_USER=,MASTER_PASSWORD=//动态改变master信息PURGEMASTER[before'date']删除master端已同步过的日志6.3.1Master同步线程状态以下列出了masterBinlogDump线程State字段中最常见的几种状态。如果在master上没有BinlogDump线程,那么同步就没有在运行。也就是说,没有slave连接上来。Sendingbinlogeventtoslave事件是由二进制日志构成,一个事件通常由更新语句加上其他信息。线程读取到一个事件并正发送到slave上。Finishedreadingonebinlog;switchingtonextbinlog读取完了一个二进制日志,正切换到下一个。Hassentallbinlogtoslave;waitingforbinlogtobeupdated已经读取完全部未完成更新日志,并且全部都发送到slave了。它处于空闲状态,正等待在master上执行新的更新操作以在二进制日志中产生新的事件,然后读取它们。Waitingtofinalizetermination当前线程停止了,这个时间很短。6.3.2SlaveI/O线程状态以下列出了slaveI/O线程State字段中最常见的几种状态。从MySQL4.1.1开始,这个状态在执行SHOWSLAVESTATUS语句结果的Slave_IO_State字段也会出现。这意味着可以只执行SHOWSLAVESTATUS语句就能了解到更多的信息。Connectingtomaster该线程证尝试连接到master上。Checkingmasterversion确定连接到master后出现的一个短暂的状态。Registeringslaveonmaster确定连接到master后出现的一个短暂的状态。Requestingbinlogdump确定连接到master后出现的一个短暂的状态。该线程向master发送一个请求,告诉它要请求的二进制文件以及开始位置。Waitingtoreconnectafterafailedbinlogdumprequest如果二进制日志转储(binarylogdump)请求失败了(由于连接断开),该线程在休眠时进入这个状态,并定期重连。重连的时间间隔由--master-connect-retry选项来指定。Reconnectingafterafailedbinlogdumprequest该线程正尝试重连到masterWaitingformastertosendevent已经连接到master,正等待它发送二进制日志。如果master闲置时,这个状态可能会持续较长时间,如果它等待超过slave_read_timeout,就会发生超时。这时,它就会考虑断开连接,然后尝试重连。Queueingmastereventtotherelaylog已经读取到一个事件,正把它拷贝到中继日志中以备SQL线程处理。Waitingtoreconnectafterafailedmastereventread读日志时发生错误(由于连接断开)。该线程在重连之前休眠master-connect-retry秒。Reconnectingafterafailedmastereventread正尝试重连到master。当连接确定后,状态就变成WaitingformastertosendeventWaitingfortheslaveSQLthreadtofreeenoughrelaylogspacerelay_log_space_limit的值非零,中继日志的大小总和超过这个值了。I/O线程等待SQL线程先处理中继日志然后删除它们以释放足够的空间。Waitingforslavemutexonexit当前线程停止了,这个时间很短。6.3.3SlaveSQL线程状态以下列出了slaveSQL线程State字段中最常见的几种状态:Readingeventfromtherelaylog从中继日志里读到一个事件以备执行。Hasreadallrelaylog;waitingfortheslaveI/Othreadtoupdateit已经处理完中继日志中的全部事件了,正等待I/O线程写入更新的日志。Waitingforslavemutexonexit当前线程停止了,这个时间很短。--------------常见的一些问题:一.从库SLAVE启动问题由于一些错误操作导致CHANGEMASTERSLAVE服务无法启动,系统报错如下:*****************************************************************Couldnotinitializemasterinfostructure;moreerrormessagescanbefoundintheMySQLerrorlog.*****************************************************************无法初始化masterinfo结构,MySQL错误日志记录了更详细的错误信息。解决方法:1、查看MySQL错误日志,如:同步的上一个Position是多少,很多情况下无法启动服务是由于mysql识别的同步始终停留在上一个Position上。2、查看master.inforelay-log.infomaster.info记录MASTER相关信息,relay-log.info记录当前同步日志信息。3、停止myslq服务,删除master.inforelay-log.info4、启动mysql服务。5、重新CHANGEMASTER,重新启动SLAVE服务。.主从不能同步showslavestatus;报错:Errorxxxdosn'texistshowslavestatus\G:Slave_SQL_Running:NOSeconds_Behind_Master:NULL解决方法:stopslave;setglobalsql_slave_skip_counter=1;startslave;之后Slave会和Master去同步主要看:Slave_IO_Running:YesSlave_SQL_Running:YesSeconds_Behind_Master是否为00就是已经同步了2,还需要做的一些优化与监视:showfullprocesslist;//查看mysql当前同步线程号skip-name-resolve//跳过dns名称查询,有助于加快连接及同步的速度max_connections=1000//增大Mysql的连接数目,(默认100)max_connect_errors=100//增大Mysql的错误连接数目,(默认10)查看日志一些命令1,showmasterstatus\G;在这里主要是看log-bin的文件是否相同。showslavestatus\G;在这里主要是看:Slave_IO_Running=YesSlave_SQL_Running=Yes如果都是Yes,则说明配置成功.2,master上输入showprocesslist\G;mysql>SHOWPROCESSLIST\G***************************1.row***************************Id:2User:rootHost:localhost:32931db:NULLCommand:BinlogDumpTime:94State:Hassentallbinlogtoslave;waitingforbinlogtobeupdatedInfo:NULL如果出现Command:BinlogDump,则说明配置成功.stopslave#停止同步startslave#开始同步,从日志终止的位置开始更新。SETSQL_LOG_BIN=0|1#主机端运行,需要super权限,用来开停日志,随意开停,会造成主机从机数据不一致,造成错误SETGLOBALSQL_SLAVE_SKIP_COUNTER=n#客户端运行,用来跳过几个事件,只有当同步进程出现错误而停止的时候才可以执行。RESETMASTER#主机端运行,清除所有的日志,这条命令就是原来的FLUSHMASTERRESETSLAVE#从机运行,清除日志同步位置标志,并重新生成master.info虽然重新生成了master.info,但是并不起用,最好,将从机的mysql进程重启一下,LOADTABLEtblnameFROMMASTER#从机运行,从主机端重读指定的表的数据,每次只能读取一个,受timeout时间限制,需要调整timeout时间。执行这个命令需要同步账号有reloadsuper权限。以及对相应的库有select权限。如果表比较大,要增加net_read_timeoutnet_write_timeout的值LOADDATAFROMMASTER#从机执行,从主机端重新读入所有的数据。执行这个命令需要同步账号有reloadsuper权限。以及对相应的库有select权限。如果表比较大,要增加net_read_timeoutnet_write_timeout的值CHANGEMASTERTOmaster_def_list#在线改变一些主机设置,多个用逗号间隔,比如CHANGEMASTERTOMASTER_HOST='master2.mycompany.com',MASTER_USER='replication',MASTER_PASSWORD='bigs3cret'MASTER_POS_WAIT()#从机运行SHOWMASTERSTATUS#主机运行,看日志导出信息SHOWSLAVEHOSTS#主机运行,看连入的从机的情况。SHOWSLAVESTATUS(slave)SHOWMASTERLOGS(master)SHOWBINLOGEVENTS[IN'logname'][FROMpos][LIMIT[offset,]rows]PURGE[MASTER]LOGSTO'logname';PURGE[MASTER]LOGSBEFORE'date'showbinlogevents;#查看主库二进制日志文件内容:注意:1.主辅库同步主要是通过二进制日志来实现同步的。2.在启动辅库的时候必须先把数据同步,并删除日志目录下的:master.info文件。因为master.info记录了上次要连接主库的信息,如果不删除,即使my.cnf里进行了修改,也不起作用。因为读取的还是master.info文件里的信息。

注:关于MySQL主从同步备份策略分享的内容就先介绍到这里,更多相关文章的可以留意

代码注释

作者:喵哥笔记

IDC笔记

学的不仅是技术,更是梦想!