恢复MySQL!是我的条件反射,PXB开源的力量...
📢📢📢📣📣📣
哈喽!大家好,我是【IT邦德】,江湖人称jeames007,10余年DBA及大数据工作经验
一位上进心十足的【大数据领域博主】!😜😜😜
中国DBA联盟(ACDU)成员,目前服务于工业互联网
擅长主流Oracle、MySQL、PG、高斯及Greenplum运维开发,备份恢复,安装迁移,性能优化、故障应急处理等。
✨ 如果有对【数据库】感兴趣的【小可爱】,欢迎关注【IT邦德】💞💞💞
❤️❤️❤️感谢各位大可爱小可爱!❤️❤️❤️
文章目录
- 📣 1.PXB的安装
- 📣 2.全备和恢复
- ✨ 2.1 环境准备
- ✨ 2.2 全量备份
- ✨ 2.3 全备的恢复
- 📣 3.增量备份和恢复
- ✨ 3.1 全量备份
- ✨ 3.2 一级增量备份
- ✨ 3.3 二级增量备份
- ✨ 3.4 恢复数据
- 📣 4.压缩备份与还原
Xtrabackup 是由 Percona 公司提供的一款 MySQL 数据库备份恢复工具
📣 1.PXB的安装
rpm -ivh percona-xtrabackup-80-8.0.35-30.1.el7.x86_64.rpm --nodeps --force
which xtrabackup
xtrabackup --version
常用选项:
–host 指定主机
–user 指定用户名
–password 指定密码
–port 指定端口
–databases 指定数据库
–incremental 创建增量备份
–incremental-basedir 指定包含完全备份的目录
–incremental-dir 指定包含增量备份的目录
–apply-log 对备份进行预处理操作
–defaults-file 指定默认配置文件,默认是读取/etc/my.cf
📣 2.全备和恢复
Percona Xtrabackup 8.0版本移除了 innobackupex 命令
innobackupex且只能备份 8.0 以下版本的 MySQL,实际中使用 xtrabackup 命令来备份8.0的版本
2.4 版本支持 MySQL 5.11 , 5.5, 5.6 和 5.7 的版本
–说明:
prepare 的作用一般情况下,在备份完成后,数据尚且不能用于恢复操作,因为备份的数据中可能会包含尚未提交的事务或已经提交但尚未同步至数据文件中的事务。 因此,此时数据文件仍处于不一致状态。
“准备”的主要作用正是通过回滚未提交的事务及同步已经提交的事务至数据文件也使得数据文件处于一致性状态。
在实现“准备”的过程中,xtrabackup 通常还可以使用–use-memory 选项来指定其可以使用的内存的大小,默认通常为 100M。如果有足够的内存可用,可以多划分一些内存给 prepare 的过程,以提高其完成速度。
xtrabackup 命令的–copy-back 选项用于执行恢复操作,其通过复制所有数据相关的文件至 mysql 服务器 DATADIR 目录中来执行恢复过程。
最后一步也可以使用 OS 的 cp 命令来替代!!
当数据恢复至 DATADIR 目录以后,还需要确保所有数据文件的属主和属组均为正确的用户,
如 mysql, 否则,在启动 mysqld 之前还需要事先修改数据文件的属主和属组。
✨ 2.1 环境准备
create database ceshi character set utf8mb4;
create table ceshi.articles (id int primary key auto_increment,content longtext not null) ENGINE=InnoDB;
insert into ceshi.articles (id,content) values (11,‘hahahahahaha’),(12,‘xixixixixix’),(13,‘aiaiaiaia’),(14,‘hohoahaoaooo’);
mysql> select * from ceshi.articles;
+----+--------------+
| id | content |
+----+--------------+
| 11 | hahahahahaha |
| 12 | xixixixixix |
| 13 | aiaiaiaia |
| 14 | hohoahaoaooo |
+----+--------------+
4 rows in set (0.00 sec)
✨ 2.2 全量备份
mkdir -p /bk/
xtrabackup -uroot -proot -S/var/lib/mysql/mysql.sock --backup --target-dir=/bk/full
xtrabackup -uroot -proot -S/var/lib/mysql/mysql.sock --backup --target-dir=/bk/full_$(date +%Y%m%d)
–说明:
比如MySQL版本为MySQL 8.0.28版本,Percona XtraBackup版本也是下载8.0.28版本,如果不匹配不过,根据官方文档,Percona XtraBackup 8.0.21开始,新增了–no-server-version-check 参数。
此参数控制是否将源系统版本与 Percona XtraBackup 版本进行比较。
为了区分全备,可以使用full_$(date +%Y%m%d)来作为备份目录
✨ 2.3 全备的恢复
第一步:xtrabackup --prepare --target-dir=/bk/full
第二步:此时关闭数据库
systemctl stop mysqld
mysqladmin shutdown -uroot -proot
第三步:copy-back
[root@centos79 ~]# cd /var/lib
[root@centos79 lib]# tar -cf mysql.tar mysql
[root@centos79 lib]# mv mysql.tar /opt
[root@centos79 lib]# rm -rf /var/lib/mysql/*
xtrabackup --copy-back --target-dir=/bk/full --datadir=/var/lib/mysql
–说明:
不要直接删除mysql的数据目录,一般tar之后转移到其他目录,防止恢复失败
要压缩整个目录,可以使用以下命令:
tar -cf archive.tar directory
重启MySQL
chown -R mysql:mysql /var/lib/mysql
mysqld_safe & --二进制环境
systemctl start mysqld --rpm环境登陆MySQL
mysql -uroot -pmysql> select * from ceshi.articles;
+----+--------------+
| id | content |
+----+--------------+
| 11 | hahahahahaha |
| 12 | xixixixixix |
| 13 | aiaiaiaia |
| 14 | hohoahaoaooo |
+----+--------------+
4 rows in set (0.01 sec)--以上全备全部成功,恢复OK
📣 3.增量备份和恢复
需要注意的是,增量备份仅能应用于 InnoDB 或 XtraDB 表,对于 MyISAM 表而言,执行增量备份时其实进行的是完全备份。
“准备”(prepare)增量备份与完全备份有着一些不同,尤其要注意的是:
(1)需要在每个备份(包括完全和各个增量备份)上,将已经提交的事务进行“重放”。“重放”之后,所有的备份数据将合并到完全备份上。
(2)基于所有的备份将未提交的事务进行“回滚”。
在增量备份命令中,–incremental-basedir 指的是上一次的增量备份所在的目录。若是一级增量备份,则指向全备的目录。
✨ 3.1 全量备份
先进行全备:
mkdir -p /backup
xtrabackup -uroot -proot -S/var/lib/mysql/mysql.sock --backup --target-dir=/backup/full
–插入数据
insert into ceshi.articles (id,content) values (110,‘bbbbbbb’),(111,‘ccccc’),(112,‘aaaaaa’),(113,‘dddddddd’);
✨ 3.2 一级增量备份
xtrabackup -uroot -proot -S/var/lib/mysql/mysql.sock --backup --target-dir=/backup/inc1 --incremental-basedir=/backup/full
解释:
target-dir=/backup/inc1中的inc1目录不用自己创建
–incremental-basedir=/backup增备份是在全备的基础上做得,这个参数是填全备的路径,全备和增备的目录要分开,不能放在一起。
✨ 3.3 二级增量备份
xtrabackup -uroot -proot -S/var/lib/mysql/mysql.sock --backup --target-dir=/backup/inc2 --incremental-basedir=/backup/inc1
–说明:
incremental-basedir=/inc1/inc1,这里的参数是参照增备1里备份的,所以这个参数是填增备1的路径。
备份好后会在/backup出现3个目录,一个是全备的数据,还有个增备1的数据,还有个增备2的数据。
[root@centos79 ~]# ll /backup
total 12
drwxr-x— 6 root root 4096 Apr 15 05:58 full
drwxr-x— 6 root root 4096 Apr 15 06:01 inc1
drwxr-x— 6 root root 4096 Apr 15 06:05 inc2
✨ 3.4 恢复数据
1.准备还原命令:
xtrabackup --prepare --apply-log-only --target-dir=/backup/full/
xtrabackup --prepare --apply-log-only --target-dir=//backup/full/ --incremental-dir=/backup/inc1/
xtrabackup --prepare --target-dir=/backup/full/ --incremental-dir=/backup/inc2/
2.恢复数据
模拟删除数据库
mysql> drop database ceshi;
systemctl stop mysqld
rm -rf /var/lib/mysql/*
xtrabackup --copy-back --target-dir=/backup/full --datadir=/var/lib/mysql
3.再次确认恢复到数据
[root@centos79 ~]# chown -R mysql:mysql /var/lib/mysql
[root@centos79 ~]# systemctl start mysqld
[root@centos79 ~]# mysql -uroot -p
Enter password:
Welcome to the MySQL monitor. Commands end with ; or \g.
Your MySQL connection id is 8
Server version: 8.0.35 MySQL Community Server - GPLCopyright (c) 2000, 2023, Oracle and/or its affiliates.Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.mysql> select * from ceshi.articles;
+------+--------------+
| id | content |
+------+--------------+
| 11 | hahahahahaha |
| 12 | xixixixixix |
| 13 | aiaiaiaia |
| 14 | hohoahaoaooo |
| 110 | bbbbbbb |
| 111 | ccccc |
| 112 | aaaaaa |
| 113 | dddddddd |
| 1110 | bbbbbbb |
| 1111 | ccccc |
| 1112 | aaaaaa |
| 1113 | dddddddd |
+------+--------------+
12 rows in set (0.00 sec)
📣 4.压缩备份与还原
选项即可 此外,在执行本地备份时,
还可以使用–parallel=4选项对多个文件进行并行复制。此选项用于指定在复制时启动的线程数目。
当然,在实际进行备份时要利用此功能的便利性,也需要
启用 innodb_file_per_table 选项或共享的表空间通过 innodb_data_file_path 选项存储在多个 ibdata 文件中。
xtrabackup -uroot -proot -S/var/lib/mysql/mysql.sock --backup --parallel=4 --compress --compress-threads=4 --stream=xbstream > /bk/jeames_full_backup.qp --no-server-version-check
解释:
如果要加速压缩,可以使用–compress-threads=4 ,使用四个线程同时进行压缩
compress就是压缩的命令,因为数据库的备份的数据比较大,占用的空间也比较多,而压缩就能减少文件大小
解压工具是qpress
[root@centos79 opt]# tar -xvf qpress-11-linux-x64.tar
qpress
[root@centos79 opt]# mv qpress /usr/bin/qpress
[root@centos79 opt]# which qpress
/usr/bin/qpressxbstream -x < /bk/jeames_full_backup.qp -C /bk#解压操作
[root@centos79 opt]# rpm -ivh zstd-1.5.5-1.el7.x86_64.rpm
[root@centos79 opt]# zstd --version
*** Zstandard CLI (64-bit) v1.5.5, by Yann Collet ***
xtrabackup --parallel 4 --decompress --target-dir=/bk
find /bk/ -name '*.qp' | xargs rm -f --删除原来的压缩包解压的原来的文件不会被删除,可以使用 --remove-original选项清除#恢复操作
xtrabackup --prepare --target-dir=/bk/full
--此时关闭数据库 systemctl stop mysqld
xtrabackup --copy-back --target-dir=/bk/full --datadir=/var/lib/mysql
chown -R mysql:mysql /var/lib/mysql
相关文章:
恢复MySQL!是我的条件反射,PXB开源的力量...
📢📢📢📣📣📣 哈喽!大家好,我是【IT邦德】,江湖人称jeames007,10余年DBA及大数据工作经验 一位上进心十足的【大数据领域博主】!😜&am…...
Storm详细配置
一、认识Storm Apache Storm是个实时数据处理的“大能”,它可以实时接收、处理并转发大量数据流,就像一个高速运转的物流中心,确保数据及时、准确地到达目的地。我们要做的,就是把这个物流中心搭建起来,并且根据我们的…...
linux redis部署教程
单节点部署: 单节点部署 Redis 非常简单,只需要在一台服务器上安装 Redis 服务即可。以下是在 Linux 环境下的单节点部署步骤: 安装 Redis:打开终端,并执行以下命令来更新软件包列表并安装 Redis 服务器:…...
【Java】隐式锁(synchronized):如何解决餐厅等座的并发难题
当你走进一家熙熙攘攘的餐厅,准备享受一顿美味的晚餐时,你是否曾想过,这里正上演着一场场微观的线程战争?在这个场景中,每一张桌子都代表着珍贵的共享资源,而每一位顾客(线程)都在争…...
科技论文和会议录制高质量Presentation Video视频方法
一、背景 机器人领域,许多高质量的期刊和会议(如IEEE旗下的TRO,RAL,IROS,ICRA等)在你的论文收录后,需要上传一个Presentation Video材料,且对设备兼容性和视频质量有较高要求&#…...
Spring高手之路17——动态代理的艺术与实践
文章目录 1. 背景2. JDK动态代理2.1 定义和演示2.2 不同方法分别代理2.3 熔断限流和日志监控 3. CGLIB动态代理3.1 定义和演示3.2 不同方法分别代理(对比JDK动态代理写法)3.3 熔断限流和日志监控(对比JDK动态代理写法) 4. 动态代理…...
如何在Unity中使用设计模式
在 Unity 环境中,设计模式是游戏开发人员遇到的常见问题的通用解决方案。将它们视为解决游戏开发中特定挑战的经过验证的模板或蓝图。以下是一些简单易懂的设计模式: 1. 单例=> 单例模式确保一个类只有一个实例,并提供对该实例的全局访问点。在 Unity 中,可以使用单例模…...
基于springboot+vue+Mysql的旅游管理系统
开发语言:Java框架:springbootJDK版本:JDK1.8服务器:tomcat7数据库:mysql 5.7(一定要5.7版本)数据库工具:Navicat11开发软件:eclipse/myeclipse/ideaMaven包:…...
vue3+ts中判断输入的值是不是经纬度格式
vue3ts中判断输入的值是不是经纬度格式 vue代码: <template #bdjhwz"{ record }"><a-row :gutter"8" v-show"!record.editable"><a-col :span"12"><a-input placeholder"经度" v-model:v…...
python常用知识总结
文章目录 1. 常用内置函数1. ASCII码与字符相互转换 1. 常用内置函数 1. ASCII码与字符相互转换 # 用户输入字符 c input("请输入一个字符: ")# 用户输入ASCII码,并将输入的数字转为整型 a int(input("请输入一个ASCII码: "))print( c &qu…...
常用的启发式算法
A算法:在电子地图导航软件中,当你输入目的地时,软件就会利用A算法来计算从现在的位置到目的地的最佳路径。该算法兼顾了路径的优化以及计算速度,保证了结果的准确性以及反馈的实时性。 模拟退火算法:模拟退火算法常被…...
应该如何进行POC测试?—【DBA从入门到实践】第三期
在数据库选型过程中,为确保能够灵活应对数据规模的不断扩大和处理需求的日益复杂化,企业和技术人员会借助POC测试来评估不同数据库系统的性能。在测试过程中,性能、并发处理能力、存储成本以及高可用性等核心要素通常会成为大家关注的焦点&am…...
通过Clojure中的集合与序列谈谈抽象的重要
与君共勉:生命不息,学习不止,切忌浮躁,静下心来,每天进步一点点。 Clojure简介 Clojure是一门运行在JVM上面的Lisp方言,其它的Lisp方言还有Scheme、Common Lisp等。Lisp相关的著名书籍有《计算机程序的构…...
Rust---模式(Pattern)匹配
目录 模式是什么它用来做什么模式匹配和赋值为什么会有模式匹配模式匹配用在什么地方match 表达式if let表达式while let表达式for 循环let 语句函数参数不可驳模式匹配和可驳模式匹配模式是什么 在Rust中,模式(Pattern)是一种用于匹配和解构数据的语法结构。模式匹配中常用…...
MATLAB 计算点投影到平面上的坐标(59)
MATLAB 计算点投影到平面上的坐标(59) 一、算法介绍二、算法实现1.代码2.结果一、算法介绍 点投影到平面,计算投影点的坐标,下面提供MATLAB版本的计算程序,直接运行即可,内有验证数据,具体看代码即可。 二、算法实现 1.代码 代码如下(示例): % 平面上的三个点分…...
2024年MathorCup数学建模B题甲骨文智能识别中原始拓片单字自动分割与识别研究解题文档与程序
2024年第十四届MathorCup高校数学建模挑战赛 B题 甲骨文智能识别中原始拓片单字自动分割与识别研究 原题再现: 甲骨文是我国目前已知的最早成熟的文字系统,它是一种刻在龟甲或兽骨上的古老文字。甲骨文具有极其重要的研究价值,不仅对中国文…...
嵌入式与移动物联网开发教程和案例
一、嵌入式与移动物联网概述 嵌入式系统是指嵌入到设备中的专用计算机系统,用于控制、监视或辅助设备操作。而移动物联网则是指通过物联网技术将各种智能设备与互联网连接起来,实现设备之间的互联互通和智能化管理。嵌入式与移动物联网技术的结合&#…...
AttachVoExample
目录 1、 AttachVoExample 1.1、 GeneratedCriteria 1.2、 addCriterion 1.3、 andFnameGreaterThanOrEqualTo 1.4、 GeneratedCriteria Atta...
图像处理特征提取
图像处理中的特征提取是指从图像数据中提取出具有区分性和代表性的特征,以用于图像分类、目标检测、图像匹配等任务。下面介绍几种常见的图像处理特征提取方法: 颜色特征:颜色是图像中最直观且重要的特征之一。常见的颜色特征提取方法包括颜色…...
前端大屏适配几种方案
一、方案一:remfont-size 动态设置HTML根字体大小和body字体大小,会使用到lib-flexible.js插件lib-flexible.js (function flexible(window, document) {var docEl document.documentElementvar dpr window.devicePixelRatio || 1// adjust body font…...
2011年认证杯SPSSPRO杯数学建模B题(第一阶段)生物多样性的评估全过程文档及程序
2011年认证杯SPSSPRO杯数学建模 B题 生物多样性的评估 原题再现: 2010 年是联合国大会确定的国际生物多样性年。保护地球上的生物多样性已经越来越被人类社会所关注,相关的大规模科研和考察计划也层出不穷。为了更好地建立国际交流与专家间的合作&…...
AcWing 793. 高精度乘法——算法基础课题解
AcWing 793. 高精度乘法 题目描述 给定两个非负整数(不含前导 00) A 和 B,请你计算 AB 的值。 输入格式 共两行,第一行包含整数 A,第二行包含整数 B。 输出格式 共一行,包含 AB 的值。 数据范围 1≤…...
【一刷《剑指Offer》】面试题 3:二维数组中的查找
力扣对应题目链接:240. 搜索二维矩阵 II - 力扣(LeetCode) 核心考点:数组相关,特性观察,时间复杂度把握。 一、《剑指Offer》对应内容 二、分析题目 正常查找的过程本质就是排除的过程,谁排除…...
Linux下静态库与动态库使用总结
区别 使用静态库占用的磁盘空间相对比动态库要大。 如果多个可执行程序使用库中同一个函数,那么链接静态库时同一个函数的代码会被复制多份,而链接动态库只复制一份。动态库可共享且版本更新方便 静态链接库在程序编译的时候就被加载进来,不…...
分布式任务调度:架构、原理与实践
引言 在当今快速发展的科技领域中,任务调度作为管理和优化计算资源的重要工具,扮演着至关重要的角色。从单机环境到分布式系统,任务调度的演进不仅跟随着计算机技术的进步,更是为了应对日益复杂的应用场景和需求。本博客将深入探…...
ping命令返回无法访问目标主机和请求超时浅析
在日常经常用ping命令测试网络是否通信正常,使用ping命令时也经常会遇到这两种情况,那么表示网络出现了问题。 1、请求超时的原因 可以看到“请求超时”没有收到任何回复。要知道,IP数据报是有生存时间的,当其生存时间为零时就会…...
地球上的七大洲介绍
地球上的七大洲示意图: 1. 亚洲(Asia):世界上最大的洲,面积约为44579000平方公里。亚洲地域辽阔,包括从北极圈到赤道的各种气候和地形。它拥有世界上最多的人口,也是世界上一些最古老文明的发源…...
IntelliJ IDEA 2024 for Mac/Win:引领Java开发新纪元的高效集成环境
在日新月异的软件开发领域,一款高效、智能的集成开发环境(IDE)无疑是程序员们不可或缺的神兵利器。今天,我要为大家介绍的,正是这样一款集大成之作——IntelliJ IDEA 2024。无论是Mac用户还是Windows用户,只…...
Java 中命令模式,请用代码具体举例
在Java中,命令模式是一种行为设计模式,它允许将请求封装成一个对象,从而使得可以参数化其他对象对请求进行调用、队列化请求、或者记录请求日志,同时支持可撤销的操作。 下面是一个简单的示例代码,展示了如何使用命令模…...
低延时+高并发+强事务丨DolphinDB 交易型内存存储引擎 IMOLTP 使用指南
1. 背景 在一些数据库应用场景中,例如金融行业的交易系统,其主要工作负载来源于对关系表的高频度、高并发的更新和查询操作。这样的应用场景要求数据的读写和计算能够具有低延迟、高并发的特征,同时保证极高的数据一致性,并提供 …...
网站建设北京贵/郑州网站制作
一、Hadoop简介 Hadoop是由java语言编写的,在分布式服务器集群上存储海量数据并运行分布式分析应用的开源框架,其核心部件是HDFS与MapReduce。 HDFS是一个分布式文件系统:引入存放文件元数据信息的服务器Namenode和实际存放数据的服务器Datan…...
做网站需要备案吗/沈阳网站关键词优化多少钱
一、定位 定位:定位是一种更加高级的布局手段。通过定位可以将元素放在页面的任意位置。position:通过position来设置定位。可选值:static 默认值,元素是静止,没有开启定位relative 开启元素的相对定位absolute 开启元素的绝对…...
网站制作熊猫建站/大数据分析
PMP考试的重点越来越偏向对于PMBOK的理解运用上,所以PMBOK需要反复读,至少三遍。 第一遍很粗略的看,把所有内容都遍览,让自己对于整本书有个大体的理解。 第二遍需要精读,阅读的过程中做好便签和色笔记录,阅…...
wordpress head.php/dw网页设计模板网站
如果你把oracle11g装在笔记本上并让服务开机启动的话,会明显感受到笔记本比平时启动慢几十秒, 差点的甚至1-2分钟,但是不开机启动吧,每次到服务里打开,很麻烦... 用批处理文件打开和关闭不失为一个好办法。 -------…...
常州本地网站/windows优化大师官方网站
1.什么是multidict词典> 在python中,“ multidict ”一词用于指代字典,在字典中可以将单个键映射到多个值。例如 多重结构 multidictWithList {key1 : [1, 2, 3],key2 : [4, 5]}multidictWithSet {key1 : {1, 2, 3},key2 : {4, 5}}1. list如果要保留…...
电子商务网站建设网/专业seo网站优化推广排名教程
题意:输入5x5的字符串,输入操作,要求输出完成操作后的字符串。 注意:①输入的操作执行可能会越界,如果越界则按题目要求输出不能完成的语句。 ②除了最后一次的输出外,其他输出均要在后面空一行。 ③操作的最后一个换行…...