百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

基于mysql协议的数据库备份与恢复

qihemm 2025-06-20 20:01 6 浏览 0 评论

1.背景

信息化平台生产上线以后,除了一些日常的功能、服务器运维工作,最核心的工作是对数据安全的管理,特别是业务存储数据。一般情况下我们可以通过一种数据备份与恢复的设计方案来约定。设计方案中包含备份的策略。比如每天增量备份,3天全量备份等。

2.全量备份

2.1.备份

先看一下全量备份某个数据库的备份命令,如下:

mysqldump -h 127.0.0.1 -P 8899 -u root -p123456 test --default-character-set=utf8mb4 ---flush-logs > backup.sql
  • h 代表当前数据库服务连接的地址,可根据实际情况修改,127.0.0.1 表示通过数据库本机进行访问;
  • P 代表数据库服务的访问端口,注意这里的P一定是大写字母;
  • u 代表数据库服务访问用户名,可通过数据库服务搭建完成后进行设置;
  • p 代表数据库服务访问密码,通过数据库服务搭建完成后进行设置。注意这里的p一定是小写字母;
  • test 代表需要备份的数据库名称,可根据实际情况修改;
  • default-character-set 代表默认备份数据表及数据的格式,示例中是utf8mb4;
  • flush-logs 代表的是在备份时,使用新的日志文件来记录接下来的数据变动记录信息;可根据实际情况加入。

以上为备份命令的描述信息,接下来我们通过编写shell脚本实现完整的备份。如下:

#!/bin/bash
# 获取当前时间
date_now=$(date "+%Y%m%d-%H%M%S")
# 备份目录
backUpFolder=/data/database_backup/
# 数据库连接用户名
username="root"
# 数据库连接密码
password="123456"
# 需要备份的数据库名
dbname="test"
# 需保留备份数据库文件数量
count=3
#定义备份文件名
fileName="${dbname}_${date_now}.sql"
#定义备份文件目录
backUpFileName="${backUpFolder}/${fileName}"
echo "starting database backup ${dbname} at ${date_now}."
mysqldump -h "${host}" -u "${username}" -p"${password}" ${dbname} --default-character-set=utf8mb4 ---flush-logs  > ${backUpFileName}
#进入到备份文件目录
cd ${backUpFolder}
#压缩备份文件
tar -zcvf ${fileName}.tar.gz ${fileName}
date_end=$(date "+%Y%m%d-%H%M%S")

#删除源文件
rm -rf $backup_path/$database_name-$date_time.sql

echo "$date_time 压缩后删除原文件 delete $backup_path/$database_name-$date_time.sql" >> $backup_path/dump.log

#找出需要删除的备份
delfile=`ls -l -crt  ${backUpFolder}/*.tar.gz | awk '{print $9 }' | head -1`
#判断现在的备份数量是否大于阈值
number=`ls -l -crt  ${backUpFolder}/*.tar.gz | awk '{print $9 }' | wc -l`

if [ $number -gt $count ]
then
  #删除最早生成的备份,只保留count数量的备份
  rm $delfile
  #更新删除文件日志
  echo "$date_time 删除 $count 前的文件 $delfile" >> $backUpFolder/dump.log
fi
echo "backup mysql database finish ${dbname} at ${date_end}."

2.2.恢复

恢复全量备份通常情况下有两种方式,一种通过mysql命令进行备份,另外一种通过连接登录数据库服务以后,通过source命令进行恢复。

2.2.1 mysql命令进行恢复

mysql -h 127.0.0.1 -P 8899 -u root -p123456 test --default-character-set=utf8mb4 < backup.sql

2.2.2 source命令进行恢复

mysql> source /path/bakdup.sql

具体命令参数可以参考备份章节的详解。

3.1.增量备份

首先在进行增量备份之前需要查看一下配置文件,查看 log_bin 是否开启,因为要做增量备份首先要开启 log_bin 。首先,进入到 myslq 命令行,如下:

show variables like '%log_bin%';

输出的内容为:

mysql> show variables like '%log_bin%';
+---------------------------------+-------+
| Variable_name                   | Value |
+---------------------------------+-------+
| log_bin                         | OFF   |
| log_bin_basename                |       |
| log_bin_index                   |       |
| log_bin_trust_function_creators | OFF   |
| log_bin_use_v1_row_events       | OFF   |
| sql_log_bin                     | ON    |
+---------------------------------+-------+

这里看到,log_bin选项并没有被打开,这个时候需要通过修改配置文件进行开启。一般mysql配置文件是在/etc/my.cnf 目录下。修改内容为:

[mysqld]
pid-file    = /data/mysql/run/mysqld/mysqld.pid
socket      = /data/mysql/run/mysqld/mysqld.sock
datadir    = /data/mysql/data

#binlog setting,开启增量备份的关键
log-bin=/data/mysql/data/mysql-bin
server-id=1

修改完成以后,重新启动服务。再次查看开启状态,如下:

mysql> show variables like '%log_bin%';
+---------------------------------+------------------------------------+
| Variable_name                   | Value                              |
+---------------------------------+------------------------------------+
| log_bin                         | ON                                 |
| log_bin_basename                | /data/mysql/data/mysql-bin         |
| log_bin_index                   | /data/mysql/data//mysql-bin.index  |
| log_bin_trust_function_creators | OFF                                |
| log_bin_use_v1_row_events       | OFF                                |
| sql_log_bin                     | ON                                 |
+---------------------------------+------------------------------------+

这个时候发现已经开启了,接下来我们就开始学习增量备份的原理吧。首先需要查看当前使用的
mysql_bin.000***.log,通过一下命令查看如下:

show master status;

打印结果如下:

mysql> show master status;
+------------------+----------+--------------+------------------+-------------------+
| File             | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+------------------+----------+--------------+------------------+-------------------+
| mysql-bin.000015 |      610 |              |                  |                   |
+------------------+----------+--------------+------------------+-------------------+

当前正在记录日志的文件名为 mysql-bin.000015 。再查看一下当前数据库中用户表的数据情况。查询看一下:

mysql> select * from users;
+-------+------+----+
| name  | sex  | id |
+-------+------+----+
| zone  | 0    |  1 |
| zone1 | 1    |  2 |
| zone2 | 0    |  3 |
+-------+------+----+

紧接着我们插入一条数据:

insert into `zone`.`users` ( `name`, `sex`, `id`) values ( 'zone3', '0', '4');

再次查询users表,如下:

mysql> select * from users;
+-------+------+----+
| name  | sex  | id |
+-------+------+----+
| zone  | 0    |  1 |
| zone1 | 1    |  2 |
| zone2 | 0    |  3 |
| zone3 | 0    |  4 |
+-------+------+----+

紧接着执行一下命令,刷新日志文件如下:

mysqladmin -u root -p123456 flush-logs

此时发生的结果是日志文件从 mysql-bin.000015 变为 mysql-bin.000016,而 mysql-bin.000015 则记录着刚刚 insert 命令的日志。那么到现在为止,其实已经完成了增量备份了。

3.2.恢复备份

现在将备份章节描述的用户表插入的数据删除,效果如下:

delete from `zone`.`users` where `id`='4'
mysql> select * from users;
+-------+------+----+
| name  | sex  | id |
+-------+------+----+
| zone  | 0    |  1 |
| zone1 | 1    |  2 |
| zone2 | 0    |  3 |
+-------+------+----+

执行再次查询发现数据已经被删除了。那么重点来了,想从从 mysql-bin.000015 中恢复刚刚删除的数据:

mysqlbinlog /data/mysql/data/mysql-bin.000015 | mysql -uroot -p123456 zone;

上述命令指定了需要恢复的 mysql_bin 文件,指定了用户名:root 、密码:123456 、数据库名:zone。效果如下:

mysql> select * from users;
+-------+------+----+
| name  | sex  | id |
+-------+------+----+
| zone  | 0    |  1 |
| zone1 | 1    |  2 |
| zone2 | 0    |  3 |
| zone3 | 0    |  4 |
+-------+------+----+

整个增量备份的操作流程都在这里了。

相关推荐

VLOOKUP的18种高阶用法大公开!99%的人都不知道的神操作!

作为被头条用户催更的Excel课代表,今天带来让HR追着要模板、让老板主动加薪的VLOOKUP终极指南!从基础到高阶一网打尽,文末送36个行业专用模板!一、为什么你的VLOOKUP总报错?血泪大数据...

Vlooup公式,2种模糊查找匹配,1分钟学会

工作中,VLOOKUP公式使用频率是很高的,用来各种查找匹配问题今天我们分享两种模糊查找匹配问题,一种是文本的模糊查找匹配,一种是数字的模糊查找匹配问题1、文本模糊查找匹配使用模拟数据举个例子,原始数...

与vlookup功能相似的函数,照样搞定表格数据查询,简单还实用

在日常表格数据处理工作,说到数据查询,很多小伙伴首先想到的是Vlookup函数,老师的教程中也多次讲到Vlookup函数的用法和实例。其实在Excel中还有其他的数据查询函数公式或技巧,今天我们先来学...

别再折腾VLOOKUP了!DGET逆向查找10秒通关,小白必看

今天要掀翻一个“过气网红”——VLOOKUP!你是不是也经历过这些崩溃瞬间:逆向查找要交换列顺序,复制粘贴到手软!多条件查找要嵌套MATCH,公式长到怀疑人生!别忍了!今天教你用DGET函数一键封...

职场新人必学!VLOOKUP函数10分钟速成指南

正文:"今天来讲解办公人入职期初函数VLOOKUP,这是所有职场人最重要也是最基础的技能。掌握它,90%的数据查找再不用求人!特别献给刚入职场的你——别让Excel成为加班理由。"——...

巧用Vlookup函数揪出“第三者”(vlookup第三个参数是什么)

在一张Excel表格的重复记录中,让你快速列出每种不同物品第2次或第n次出现的记录,你会怎么做?Vlookup函数就有这个本事。举例来说,产品或者物流表格中往往会记录有同一货物的多笔数据(如下图的今日...

分享12个VLOOKUP超经典用法(vlookup通俗易懂)

刚毕业那会,面试的时候经常会被问到会不会用Excel?我就理直气壮地回答:“会啊。”毕竟,简历上可是写着熟练。接着面试官扔出一句“那你会VLOOKUP吗?”我还是会一口咬定:“我会。“其实,我都没用过...

查找匹配别只知道Vlookup,Sumifs也可以!

工作中遇到查找匹配问题的时候,大家第一反应是不是都想到的Vlookup公式呢,有没有小伙伴们给Sumifs一点点机会的呢,有时候Sumifs比Vlookup更好用1、Vlookup公式举个例子,左边是...

Excel函数讲解:VLOOKUP函数,轻松玩转数据查找

常用函数系列教学:VLOOKUP函数讲解(46)。不懂VLOOKUP函数怎么高效查找数据?闲话少叙直接开讲。基本含义:VLOOKUP函数用于在表格按垂直方向(到)上查找返回行数据。如何使用及注意事项?...

CHOOSEROWS+CHOOSECOLS原来是一个超级查找函数组合!

场景一:要在学生名册中,抽查一名学生成绩。公式:=CHOOSEROWS(A1:D5,2)解析:第一参数A1:D5为数据区域,第二参数2表示提取第2行数据。把数据区域改为A2:D5,结合RANDBETW...

数据查询不止有vlookup函数,自定义zlookup函数查询操作更高效

Excel数据查询,相信大家首先会想到vlookup函数。毋庸置疑vlookup函数在Excel数据查询中作用是非常的强大。但是它也有一些不能实现的数据查询。如上图所示,我们需要根据人员的出现次数,提...

「EXCEL进阶」VLOOKUP函数怎么查询一个值返回多个结果

前言:VLOOKUP函数一般一次只能返回一个结果,本例介绍通过辅助列的方法使VLOOKUP函数查询一个值,返回这个值对应的多个结果。使用场景举例:根据表格中同一数值,返回对应值的多个结果。比如这张数据...

WPS查找能手VLOOKUP函数使用方法讲解

各位同学好!今天我们来深度剖析WPS最实用的查找工具——VLOOKUP函数。这个函数能帮你在表格中快速定位并提取所需数据,可以帮你快速核对两批数据差异,还可以合并多个表格的关联信息,甚至可以帮你制作动...

Excel常用10个函数:跨表查找Vlookup,适用于大数据中查找精确值

Hello大家好,我是Office米,今天,我们将和大家一起分享交流,常用的10个函数之一:查找引用函数VLOOKUP。在说VLOOKUP函数之前,我们要先了解,平时Excel日常工作中会遇到哪些问题...

掌握了这个套路,无论用 Excel vlookup 函数查找第几次结果都很轻松

用vlookup查找默认情况下是一对一出结果,如果要一对多查找,就需要用到各种技巧,具体方法我写过非常多了,可以搜索一下历史记录。只要掌握了今天这个套路,无论你想查找第几次重复值,都易如反掌。案例...

取消回复欢迎 发表评论: