如何备份和恢复数据库
目录
- 1.xtrabackup 是什么
- 2.全量备份
- 3.增量备份
- 4.使用备份进行恢复
- 5.原理
- 6.参考
本文主要介绍如何使用xtrabackup 进行数据库的备份和恢复,并在最后介绍了原理。
1.xtrabackup 是什么
XtraBackup是由Percona开发的一款开源的MySQL数据库备份工具。它可以对InnoDB和XtraDB存储引擎的数据库进行热备份,即在数据库运行的过程中进行备份,不需要停止数据库服务。
XtraBackup的主要特点包括:
- 热备份:XtraBackup可以在数据库运行的过程中进行备份,不需要停止数据库服务。
- 支持全备和增量备份:XtraBackup既可以进行全备份,也可以进行增量备份,只备份上次备份以后修改的数据。
- 高效:XtraBackup在备份过程中只读取需要备份的数据,不会对整个数据库进行扫描,因此备份效率高。
- 一致性备份:XtraBackup可以创建数据库的一致性快照,即使在备份过程中数据库的数据发生改变,也不会影响备份的一致性。
- 压缩和流式备份:XtraBackup支持备份数据的压缩,可以大大减少备份数据的大小。同时,XtraBackup还支持流式备份,可以将备份数据直接传输到其他服务器或云存储,不需要在本地存储备份数据。
- 恢复灵活:XtraBackup备份的数据可以恢复到任何MySQL或MariaDB服务器,恢复过程简单快速。
2.全量备份
使用XtraBackup进行全量备份的基本步骤如下:
(1) 安装XtraBackup:
根据你的操作系统类型,从Percona官方网站下载并安装XtraBackup。
(2) 创建备份目录:
创建一个用于存储备份文件的目录,例如/data/backup/。
(3) 运行备份命令:
使用xtrabackup命令运行全量备份。例如,运行以下命令进行全量备份:
xtrabackup --backup --target-dir=/data/backup/ --user=root --password=123456
其中,–user和–password是MySQL数据库的用户名和密码,–target-dir是备份目录的路径。
(4) 等待备份完成:
备份过程可能需要一些时间,具体时间取决于数据库的大小和性能。
(5) 准备备份数据:
备份完成后,需要对备份数据进行准备,使其可以用于恢复。运行以下命令:xtrabackup --prepare --target-dir=/data/backup/
(6) 备份完成:
此时在/data/backup/目录下的文件就是全量备份好的数据,可以将其复制到其他位置进行存储或传输。
以上是一个全量备份的基本示例,具体的备份命令和选项可以根据实际需求进行调整。在备份过程中,还可以使用其他选项来控制备份的行为,例如压缩、增量备份等。
3.增量备份
使用XtraBackup进行增量备份的基本步骤如下:
- 首先,你需要进行一次全量备份,这将作为增量备份的基础。全量备份的步骤可以参考前面的回答。
- 其次,创建增量备份目录:创建一个用于存储增量备份文件的目录,例如/data/incremental_backup/。
- 运行增量备份命令:使用xtrabackup命令运行增量备份。例如,运行以下命令进行增量备份:
xtrabackup --backup --target-dir=/data/incremental_backup/ --incremental-basedir=/data/backup/ --user=root --password=123456
其中,–user和–password是MySQL数据库的用户名和密码,–target-dir是增量备份目录的路径,--incremental-basedir
是全量备份目录的路径。 - 等待增量备份完成:增量备份过程可能需要一些时间,具体时间取决于数据库的大小和性能。
- 备份完成:此时在/data/incremental_backup/目录下的文件就是增量备份好的数据,可以将其复制到其他位置进行存储或传输。
4.使用备份进行恢复
使用XtraBackup基于增量备份进行数据恢复的基本步骤如下:
(1) 停止MySQL服务:
在恢复数据前,需要先停止MySQL服务。service mysql stop
(2) 移除旧的数据目录:
备份数据将恢复到MySQL的数据目录,因此需要先移除旧的数据目录。例如,如果数据目录是/var/lib/mysql/,可以运行以下命令移除旧的数据目录:rm -rf /var/lib/mysql/*
注意,这将删除所有旧的数据,如果你需要保留旧的数据,请先进行备份。
(3) 准备全量备份数据:
首先需要对全量备份数据进行准备。
xtrabackup --prepare --apply-log-only --target-dir=/data/backup/
其中,–target-dir是全量备份目录的路径。
(4) 准备增量备份数据:
然后需要对增量备份数据进行准备。
xtrabackup --prepare --apply-log-only --target-dir=/data/backup/ --incremental-dir=/data/incremental_backup/
其中,–target-dir是全量备份目录的路径,–incremental-dir是增量备份目录的路径。
(5) 运行恢复命令:
使用xtrabackup命令运行数据恢复。
xtrabackup --copy-back --target-dir=/data/backup/
其中,–target-dir是全量备份目录的路径。
(6) 修改数据目录的所有权:
恢复完成后,需要修改数据目录的所有权,使其与MySQL的运行用户和用户组一致。
例如,如果MySQL的运行用户和用户组都是mysql,可以运行以下命令修改数据目录的所有权:chown -R mysql:mysql /var/lib/mysql/
(7) 启动MySQL服务:
数据恢复完成后,可以启动MySQL服务。
service mysql start
5.原理
XtraBackup是一款开源的MySQL数据库备份工具,它的工作原理主要基于InnoDB存储引擎的日志和数据文件的复制。
以下是XtraBackup的主要工作原理:
- 读取并复制数据文件:XtraBackup首先会读取InnoDB存储引擎的数据文件(.ibd文件),并将其复制到备份目录。在复制过程中,XtraBackup会尽可能地减少对数据库性能的影响,例如通过并行复制和压缩数据等方式。
- 记录日志位置:在开始复制数据文件时,XtraBackup会记录InnoDB存储引擎的日志文件(redo log)的位置,这个位置称为LSN(Log Sequence Number)。LSN是InnoDB存储引擎用来标识每个事务在日志文件中的位置。
- 复制日志文件:在复制数据文件完成后,XtraBackup会复制LSN位置之后的日志文件。这些日志文件包含了复制数据文件过程中可能发生的数据变更。
- 准备备份数据:在备份完成后,XtraBackup会对备份数据进行准备,使其可以用于恢复。准备过程主要是应用日志文件中的数据变更,使备份数据达到一致的状态。
顺带提下,mysqldump 也是 数据库备份常用的工具。
mysqldump是MySQL自带的一款数据备份工具,它的工作原理主要是通过执行SQL语句来获取数据库的结构和数据。
以下是mysqldump的基本工作原理:
- 获取数据库结构:mysqldump首先获取数据库的结构信息,包括表结构、索引、触发器、存储过程等。它通过执行
SHOW CREATE TABLE
等SQL语句来获取这些信息,并将结果输出为创建这些对象的SQL语句。 - 获取数据:mysqldump然后获取表的数据。它通过执行
SELECT * FROM table_name
等SQL语句来获取数据,并将结果输出为插入这些数据的SQL语句。 - 锁表和事务:为了保证备份的一致性,mysqldump在备份过程中会对表进行锁定或使用事务。对于MyISAM等不支持事务的存储引擎,mysqldump会使用
LOCK TABLES
语句对表进行锁定;对于InnoDB等支持事务的存储引擎,mysqldump会使用START TRANSACTION
语句开启一个只读事务。 - 生成备份文件:mysqldump将生成的SQL语句输出到一个文件,这个文件就是备份文件。用户可以通过执行这个文件中的SQL语句来恢复数据库。
以上是mysqldump的基本工作原理,具体的工作过程可能会根据备份的选项进行调整。例如,用户可以选择只备份数据或只备份结构,也可以选择备份单个数据库或单个表。
6.参考
XtraBackup的官方说明文档
文档详细介绍了XtraBackup的安装、配置、使用方法,以及一些高级特性和常见问题的解决方法。
相关文章:
如何备份和恢复数据库
目录 1.xtrabackup 是什么2.全量备份3.增量备份4.使用备份进行恢复5.原理6.参考 本文主要介绍如何使用xtrabackup 进行数据库的备份和恢复,并在最后介绍了原理。 1.xtrabackup 是什么 XtraBackup是由Percona开发的一款开源的MySQL数据库备份工具。它可以对InnoDB和…...

简化数据库操作:探索 Gorm 的约定优于配置原则
文章目录 使用 ID 作为主键数据库表名TableName临时指定表名列名时间戳自动填充CreatedAtUpdatedAt时间戳类型Gorm 采用约定优于配置的原则,提供了一些默认的命名规则和行为,简化开发者的操作。 使用 ID 作为主键 默认情况下,GORM 会使用 ID 作为表的主键: type User st…...

保姆级Anaconda安装教程
一.anaconda下载 建议使用清华大学开源软件镜像站进行下载,使用官网下载速度比较慢。 anaconda清华大学开源软件镜像站 : https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/ 一路next即可,注意添加环境变量得选项都勾上。 二.验证…...

你写过的最蠢的代码是?——后端篇
🌷🍁 博主猫头虎(🐅🐾)带您 Go to New World✨🍁 🦄 博客首页: 🐅🐾猫头虎的博客🎐《面试题大全专栏》 🦕 文章图文并茂🦖…...
快速幂
876. 快速幂求逆元 - AcWing题库 AC代码: #include <iostream> #include <cstring> #include <algorithm>using namespace std;typedef long long ll;int n;int qmi(int a,int k,int p) {int res1;while(k){if(k&1)res(ll)res*a%p;k>&…...

【题解 动态规划】 Colored Rectangles
题目描述: 分析: 乍一看我还以为是贪心! 猫 想想感觉没问题 但是局部最优并不能保证全局最优 比如这组数据 19 19 19 19 20 20 20 20如果按照贪心的做法,答案是20*20*2 但是其实答案是19*20*4 因此这道题用贪心是不对的 于是我…...

VsCode好用的扩展插件
开发插件推荐: 别名路径跳转 >> 点击引用的变量名,ctrl 点击 跳转文件Auto Rename Tag >> 修改标签前缀,后缀标签会同时修改Chinees 中文(简体)Code Runner >> 纯js文件右键点击run code即可底部终端打印file-icons-mac >> ma…...

Linux shell编程学习笔记4:修改命令行提示符格式(内容和颜色)
一、命令行提示符格式内容因shell类型而异 Linux终端命令行提示符内容格式则因shell的类型而异,例如CoreLinux默认的shell是sh,其命令行提示符为黑底白字,内容为: tcbox:/$ 其中,tc为当前用户名,box为主机…...
vue-引入使用main.js全局常量
common.js 命名什么都可以,用来定义常量的 定义了之后使用export让此暴露出去 const QRaddress http://localhost:9875export{QRaddress, } main.js //引入刚刚的js import {QRaddress} from /config/common.js挂载 Vue.prototype.$QRaddress QRaddress使用 …...

【C语言】【动态内存管理】malloc,free,calloc,realloc
1.malloc函数 void* malloc(size_t size)功能:向内存申请字节为 size大小的空间 使用时要包含头文件:<stdlib.h> 开辟成功:返回开辟好的空间初始地址的指针 开辟失败:返回空指针 NULL 使用举例: (malloc和free…...

Linux性能优化--性能工具-系统CPU
2.0.概述 本章概述了系统级的Linux性能工具。这些工具是你追踪性能问题时的第一道防线。它们能展示整个系统的性能情况和哪些部分表现不好。 1.理解系统级性能的基本指标,包括CPU的使用情况。 2.明白哪些工具可以检索这些系统级性能指标。 2.1CPU性能统计信息 为…...

Ipython和Jupyter Notebook介绍
Ipython和Jupyter Notebook介绍 Python、IPython和Jupyter Notebook是三个不同但密切相关的工具。简而言之,Python是编程语言本身,IPython是对Python的增强版本,而Jupyter Notebook是一种在Web上进行交互式计算的环境,使用IPytho…...
数列极差(c++题解)
题目描述 佳佳的老师在黑板上写了一个由 n个正整数组成的数列,要求佳佳进行如下操作:每次擦去其中的两个数a 和b ,然后在数列中加入一个数a*b1 ,如此下去直至黑板上剩下一个数为止,在所有按这种操作方式最后得到的数…...

面试题:熟悉设计模式吗?谈谈简单工厂模式和策略模式的区别
刚刚接触设计模式的时候,我相信单例模式和工厂模式应该是用的最多的,毕竟很多的底层代码几乎都用了这些模式。自从接触了一次阿里的公众号发的一次文章关于 DDD的使用 以后,就逐渐接触了策略模式。现在在项目中运用最多的也是这几种设计模式了…...
Windows + Git + TortoiseGit + Github
一、下载Git(Git For Windows) 1.1. Git下载地址:https://gitforwindows.org/ 1.2. 默认安装即可(包名:Git-2.42.0.2-64-bit.exe) 二、下载TortoiseGit 2.1.TortoiseGit下载地址:http://tortoi…...
MySQL数据库索引练习
1.学生表:Student (Sno, Sname, Ssex , Sage, Sdept) 学号,姓名,性别,年龄,所在系 Sno为主键 课程表:Course (Cno, Cname,) 课程号,课程名 Cno为主键 学生选课表:SC (Sno, Cno, Scor…...

mysql面试题10:MySQL中有哪几种锁?表级锁、行级锁、页面锁区别和联系?
该文章专注于面试,面试只要回答关键点即可,不需要对框架有非常深入的回答,如果你想应付面试,是足够了,抓住关键点 面试官:Mysql中有哪几种锁? 在MySQL中,主要有以下几种类型的锁: 共享锁(Shared Lock):也称为读锁。多个事务可以同时持有共享锁,可以读取但不能修…...

ctfshow—1024系列练习
1024 柏拉图 有点像rce远程执行,有四个按钮,分别对应四份php文件,开始搞一下。一开始,先要试探出 文件上传到哪里? 怎么读取上传的文件? 第一步:试探上传文件位置 直接用burp抓包,…...

javaWeb学生信息管理
一、引言 学生信息管理系统是基于Java Web技术开发的一个全栈应用,用于管理学生的基本信息。本系统采用Eclipse作为开发工具,Navicat用于MySQL数据库管理,运行在JDK1.8、Tomcat9.0、MySQL8.0环境下。前端采用JavaScript、jQuery、Bootstrap4…...

玩转gpgpu-sim 04记—— __cudaRegisterBinary() of gpgpu-sim 到底做了什么
官方文档: GPGPU-Sim 3.x Manual __cudaRegisterBinary(void*) 被执行到的代码逻辑如下: void** CUDARTAPI __cudaRegisterFatBinary( void *fatCubin ) { #if (CUDART_VERSION < 2010)printf("GPGPU-Sim PTX: ERROR ** this version of GPGPU…...

中南大学无人机智能体的全面评估!BEDI:用于评估无人机上具身智能体的综合性基准测试
作者:Mingning Guo, Mengwei Wu, Jiarun He, Shaoxian Li, Haifeng Li, Chao Tao单位:中南大学地球科学与信息物理学院论文标题:BEDI: A Comprehensive Benchmark for Evaluating Embodied Agents on UAVs论文链接:https://arxiv.…...
Python爬虫实战:研究feedparser库相关技术
1. 引言 1.1 研究背景与意义 在当今信息爆炸的时代,互联网上存在着海量的信息资源。RSS(Really Simple Syndication)作为一种标准化的信息聚合技术,被广泛用于网站内容的发布和订阅。通过 RSS,用户可以方便地获取网站更新的内容,而无需频繁访问各个网站。 然而,互联网…...

全球首个30米分辨率湿地数据集(2000—2022)
数据简介 今天我们分享的数据是全球30米分辨率湿地数据集,包含8种湿地亚类,该数据以0.5X0.5的瓦片存储,我们整理了所有属于中国的瓦片名称与其对应省份,方便大家研究使用。 该数据集作为全球首个30米分辨率、覆盖2000–2022年时间…...

Nuxt.js 中的路由配置详解
Nuxt.js 通过其内置的路由系统简化了应用的路由配置,使得开发者可以轻松地管理页面导航和 URL 结构。路由配置主要涉及页面组件的组织、动态路由的设置以及路由元信息的配置。 自动路由生成 Nuxt.js 会根据 pages 目录下的文件结构自动生成路由配置。每个文件都会对…...
python爬虫:Newspaper3k 的详细使用(好用的新闻网站文章抓取和解析的Python库)
更多内容请见: 爬虫和逆向教程-专栏介绍和目录 文章目录 一、Newspaper3k 概述1.1 Newspaper3k 介绍1.2 主要功能1.3 典型应用场景1.4 安装二、基本用法2.2 提取单篇文章的内容2.2 处理多篇文档三、高级选项3.1 自定义配置3.2 分析文章情感四、实战案例4.1 构建新闻摘要聚合器…...

论文浅尝 | 基于判别指令微调生成式大语言模型的知识图谱补全方法(ISWC2024)
笔记整理:刘治强,浙江大学硕士生,研究方向为知识图谱表示学习,大语言模型 论文链接:http://arxiv.org/abs/2407.16127 发表会议:ISWC 2024 1. 动机 传统的知识图谱补全(KGC)模型通过…...

mysql已经安装,但是通过rpm -q 没有找mysql相关的已安装包
文章目录 现象:mysql已经安装,但是通过rpm -q 没有找mysql相关的已安装包遇到 rpm 命令找不到已经安装的 MySQL 包时,可能是因为以下几个原因:1.MySQL 不是通过 RPM 包安装的2.RPM 数据库损坏3.使用了不同的包名或路径4.使用其他包…...

selenium学习实战【Python爬虫】
selenium学习实战【Python爬虫】 文章目录 selenium学习实战【Python爬虫】一、声明二、学习目标三、安装依赖3.1 安装selenium库3.2 安装浏览器驱动3.2.1 查看Edge版本3.2.2 驱动安装 四、代码讲解4.1 配置浏览器4.2 加载更多4.3 寻找内容4.4 完整代码 五、报告文件爬取5.1 提…...

在 Spring Boot 中使用 JSP
jsp? 好多年没用了。重新整一下 还费了点时间,记录一下。 项目结构: pom: <?xml version"1.0" encoding"UTF-8"?> <project xmlns"http://maven.apache.org/POM/4.0.0" xmlns:xsi"http://ww…...

实战设计模式之模板方法模式
概述 模板方法模式定义了一个操作中的算法骨架,并将某些步骤延迟到子类中实现。模板方法使得子类可以在不改变算法结构的前提下,重新定义算法中的某些步骤。简单来说,就是在一个方法中定义了要执行的步骤顺序或算法框架,但允许子类…...