MySQL什么是物理备份(lvm-snapshot)
本篇文章给大家带来的内容是介绍MySQL什么是物理备份(lvm-snapshot)。有一定的参考价值,有需要的朋友可以参考一下,希望对你们有所帮助。
lvm-snapshot(工具备份)
优点:
几乎是热备(穿件快照前把表上锁,创建完成后立即释放)
支持所有引擎
备份速度快
无需使用昂贵的商业软件(它是操作系统级别的)
缺点:
可能需要跨部门协作(使用操作系统级别的命令,DBA一般没有权限)
无法预计服务停止时间
数据如果分布在多个卷上比较麻烦(针对存储级别而言)
逻辑卷快照的原理
为什么选择lvm快照备份?
原因:因为锁表的时间不一致,在锁表的瞬间是不能写入的,对其进行快照备份,备份完成后立即解锁,然后服务可以正常使用(写入等操作)比如数据量大的时候,做快照一下子就拍了,然后立即解锁,就不影响写入等操作。如果用mysqldump备份,那么数据量大的时候,锁表时间长,就会影响效率。
操作流程1、flush table with read locak;2、create snapshot3、show master status; show slave status; [可选]4、unlock tables;5、Copy files from the snapshot6、Unmount the snapshot. 7、Remove snapshot快照备份:1.迁移数据到逻辑卷(不是必须,视情况而定)2.锁表(时间)3.给数据库所在的逻辑卷拍快照4.解锁5.将快照挂载到临时挂载点上6.将快照上的所有数据拷贝到相应的备份目录里(不同主机)7.卸载快照并删除lvm备份示例
一、数据迁移到逻辑卷上
环境:数据文件不在逻辑卷上,那么需要将数据文件迁移到逻辑卷上
1、创建一个逻辑卷[root@Admin ~]# pvcreate /dev/sdb[root@Admin ~]# vgcreate vg01 /dev/sdb[root@Admin ~]# lvcreate -n lv_mysql -L 4G vg01[root@Admin ~]# mkfs.ext4 /dev/mapper/vg01-lv_mysql2、将当前的mysql数据库迁移到逻辑卷上1>先停止应用2>停止mysql服务[root@Admin ~]# service mysqld stop3>备份所有的数据文件到指定的地方[root@Admin ~]# tar -czvf /tmp/backmysql/mysql.tar.gz /data/DB/*4>挂载逻辑卷到当前mysql的数据目录里[root@Admin ~]# mount /dev/mapper/vg01-lv_mysql /data/DB/5>将刚刚备份的数据解压到数据目录里[root@Admin ~]# tar xf /tmp/backmysql/mysql.tar.gz -C /data/DB/[root@Admin ~]# mv /data/DB/data/DB/* /data/DB/ && rm -rf /data/DB/data/6>启动数据库[root@Admin ~]# service mysqld start此处启动失败原因/data/DB/数据目录的权限变成了root,更改权限重新启动[root@Admin ~]# chown mysql. -R /data/DB/ && service mysqld start 二、快照备份数据库
1、给数据库加读锁mysql> flush table with read lock;2、给mysql的数据库所在的逻辑卷创建快照[root@Admin ~]# lvcreate -n lv_mysql_s -L 50M -s /dev/vg01/lv_mysql[root@Admin ~]# dmsetup --tree lsvg01-lv_mysql (253:0) └─vg01-lv_mysql-real (253:1)└─ (8:16)vg01-lv_mysql_s (253:3) ├─vg01-lv_mysql_s-cow (253:2) │└─ (8:16) └─vg01-lv_mysql-real (253:1)└─ (8:16)3、解锁数据库[root@Admin ~]# unlock tables上面1~3步可以合并为一步[root@Admin ~]# echo "flush tables with read lock; system lvcreate -n lv_mysql_s -L 50M -s /dev/vg01/lv_mysql;unlock tables;" |mysql -p1234、将快照挂载到临时目录里[root@Admin ~]# mkdir /mnt/mysql && mount /dev/vg01/lv_mysql_s /mnt/mysql/5、备份数据[root@Admin ~]# ls /mnt/mysql/# 可以看到新的挂载目录里面的数据Admin.piddb01ib_logfile0mysqlmysql-bin.000003mysql-bin.000006mysql-bin.000009performance_schemaauto.cnfdb02ib_logfile1mysql-bin.000001mysql-bin.000004mysql-bin.000007mysql-bin.000010testbinlogibdata1loginmysql-bin.000002mysql-bin.000005mysql-bin.000008mysql-bin.index[root@Admin ~]# mkdir /backup && rsync -av /mnt/mysql /backup6、卸载快照并删除[root@Admin ~]# umount /mnt/mysql/ && lvremove /dev/vg01/lv_mysql_s7、测试验证(将数据目录里面的东西全部删除)然后再将备份的数据目录恢复过来1>我们来点狠的,直接把mysql的数据目录/data/DB/删除。[root@Admin ~]# rm -rf /data/DB/* && ls /data/DB/2>删除后可以看到重启mysql直接报错了[root@Admin ~]# service mysqld restartMySQL server PID file could not be found![失败]Starting MySQL...The server quit without updating PID file [失败]/DB/Admin.pid).3>根据上面的/backup里面备份的数据进行恢复[root@Admin ~]# mv /backup/mysql/* /data/DB/[root@Admin ~]# ls /data/DB/auto.cnfdb02ib_logfile1mysql-bin.000001mysql-bin.000004mysql-bin.000007mysql-bin.000010testbinlogibdata1loginmysql-bin.000002mysql-bin.000005mysql-bin.000008mysql-bin.indexdb01ib_logfile0mysqlmysql-bin.000003mysql-bin.000006mysql-bin.000009performance_schema4>重新启动[root@Admin ~]# chown mysql. /data/DB/ -R[root@Admin ~]# service mysqld restart这里权限更改了如果启动还是报错的话,查看下是否mysql进程还存在,如果存在,将其kill掉再重启就OK[root@Admin ~]# mysql -p123mysql> show databases;+--------------------+| Database|+--------------------+| information_schema || binlog|| db01|| db02|| login|| mysql|| performance_schema || test|+--------------------+rows in set (0.00 sec) 将上面备份整理为脚本 + Crontab 计划任务定时完成备份#!/bin/bash#LVM BackMysqlback_dir=/backup/`date +%F`[ -d $back_dir ]mkdir -p $back_direcho "flush tables with read lock; system lvcreate -n lv_mysql_s -L 50M -s /dev/vg01/lv_mysql;unlock tables;" |mysql -p123mount /dev/vg01/lv_mysql_s /mnt/mysql/rsync -a /mnt/mysql/ $back_dirif [ $? -eq 0 ];thenumount /mnt/mysql/ && lvremove -f /dev/vg01/lv_mysql_sfi自动化实现快照备份mylvmbackup
1、安装相应的软件
2、两种备份方式
1>mylvmbackupxxx终端备份
2>修改配置文件指定相应的参数正常安装MySQL:1. 安装系统2. 准备LVM,例如 /dev/vg_back/lv-mysql,mount /usr/local/mysql3. 源码安装MySQL到 /usr/local/mysql可选操作: 将现在的数据迁移到LVM1. 准备lvm及文件系统# lvcreate -L 2G -n lv-mysql vg_back# mkfs.ext4 /dev/vg_back/lv-mysql 2. 将数据迁移到LVM# service mysqld stop# mount /dev/vg_back/lv-mysql /u01/ //临时挂载点# rsync -va /usr/local/mysql/ /u01/ //将MySQL原数据镜像到临时挂载点# umount /u01/# mount /dev/vg_back/lv-mysql /usr/local/mysql //加入fstab开机挂载# df -Th/dev/mapper/vg_back-lv-mysql ext4 2.0G 274M 1.7G 15% /usr/local/mysql# service mysqld start手动基于LVM快照实现备份:1. 加锁mysql> flush table with read lock;2.创建快照# lvcreate -L 500M -s -n lv-mysql-snap /dev/vg_back/lv-mysql# mysql -uroot -p123 -e 'show master status' > /backup/`date +%F`_position.txt或者mysql> show master status;+-------------------+----------+--------------+------------------+-------------------+| File | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |+-------------------+----------+--------------+------------------+-------------------+| mysqld-bin.00003 | 135 | | | |+-------------------+----------+--------------+------------------+-------------------+3. 释放锁mysql> unlock tables;4. 从快照中备份# mount -o ro /dev/vg_back/lv-mysql-snap /u01/# mkdir /backup/`date +%F`# rsync -a /u01/ /backup/2015-07-02/5. 移除快照# umount /u01/# lvremove -f /dev/vg_back/lv-mysql-snap脚本 + Cron完成:#!/bin/bash#LVM backmysql...back_dir=/backup/`date +%F`[ -d $back_dir ] || mkdir -p $back_dirmysql -uroot -p123 -e 'flush table with read lock'lvcreate -L 500M -s -n lv-mysql-snap /dev/vg_back/lv-mysqlmysql -uroot -p123 -e 'show master status' |grep mysql > $back_dir/position.txtmysql -uroot -p123 -e 'flush logs'mysql -uroot -p123 -e 'unlock tables'mount -o ro /dev/vg_back/lv-mysql-snap /u01rsync -a /u01/ $back_dirif [ $? -eq 0 ];thenumount /u01/lvremove -f /dev/vg_back/lv-mysql-snapfi===============================================================mylvmbackup功能:利用LVM快照实现物理备份,即LVM快照备份的自动版安装perl模块1. 在线安装http://www.lenzg.net/mylvmbackup它依赖于perl 模块,可用以下命令安装perl -MCPAN -e 'install Config::IniFiles'2. 离线安装# rpm -ivh mylvmbackup-0.16-0.noarch.rpmwarning: mylvmbackup-0.16-0.noarch.rpm: Header V4 DSA/SHA1 Signature, key ID b27291f2: NOKEYerror: Failed dependencies:perl(Config::IniFiles) is needed by mylvmbackup-0.16-0.noarchperl(Date::Format) is needed by mylvmbackup-0.16-0.noarchperl(File::Copy::Recursive) is needed by mylvmbackup-0.16-0.noarch解决:# yum -y localinstall atrpms-77-1.noarch.rpm perl-File-Copy-Recursive-0.38-1.el6.rfx.noarch.rpm perl-IO-stringy-2.110-1.2.el6.rfx.noarch.rpm perl-Config-IniFiles-2.56-1.el6.rf.noarch.rpm安装mylvmbackup软件包# yum -y install mylvmbackup-0.15-0.noarch.rpm 解决依赖关系perl-TimeDate备份方法一:# mylvmbackup --user=root --password=123 --host=localhost --mycnf=/etc/my.cnf --vgname=vg_back --lvname=lv-mysql --backuptype=tar --lvsize=100M --backupdir=/backup# tar xf backup-20140903_000236_mysql.tar.gz# lsbackup backup-cnf-20150702_000236_mysqlbackup-20150702_000236_mysql.tar.gz backup-pos备份方法二:# vim /etc/mylvmbackup.conf[mysql] #连接数据库配置user=rootpassword=123456host=localhostport=3306socket=/tmp/mysql.sockmycnf=/etc/my.cnf[lvm] #LVM逻辑卷的配置vgname=vg_server #卷组名称lvname=lv_mysql #逻辑卷名称backuplv=mysql_snap #快照卷名称lvsize=500M[fs] #文件系统配置xfs=0mountdir=/var/tmp/mylvmbackup/mnt/ #挂载目录backupdir=/backup #备份目录,也可以备份到行程主机[misc] #定义备份选项backuptype=tar #定义备份的类型backupretention=0prefix=backup #定义备份文件名前缀suffix=_mysql #定义备份文件名后缀tararg=cvf #定义tar参数,默认为cvftarfilesuffix=.tar.gz #定义备份文件后缀名格式datefmt=%Y%m%d_%H%M%S #定义备份文件名时间戳格式keep_snapshot=0 #是否保留snaphotkeep_mount=0 #是否卸载snaphotquiet=0 #定义记录日志类型注释:其他配置保持输入即可然后直接执行mylvmbackup即可mylvmbackup 参考示例以上就是MySQL什么是物理备份(lvm-snapshot)的详细内容,更多请关注小潘博客其它相关文章!