当前位置: 首页 > news >正文

MySQL_主从复制读写分离

主从复制

概述
  • 主从复制是指将主数据库的DDL和DML操作通过二进制日志传到从库服务器中,然后在从库上对这些日志重新执行(也叫重做),从而使得从库和主库的数据保持同步。

  • MySQL支持一台主库同时向多台从库进行复制,从库同时也可以作为其他从服务器的主库,实现链状复制。

  • MySQL复制的有点主要包含以下三个方面:

    • 主库出现问题,可以快速切换到从库提供服务。

    • 实现读写分离,降低主库的访问压力。

    • 可以在从库中执行备份,以避免备份期间影响主库服务。

原理

在这里插入图片描述

  • 从上图来看,复制分为三步:

    • Master主库在事务提交时,会把数据变更记录在二进制日志文件Binlog中。

    • 从库读取主库的二进制日志文件Binlog,写入到从库中继日志Relay Log。

    • slave重做中继日志中的事件,将改变反映它自己的数据。

搭建
  • 服务器准备

    • 开放指定的3306端口号:

      • firewail-cmd --zone=public --add-port=3306/tcp -permanent

      • firewail-cmd -reload

    • 关闭服务器的防火墙

      • systemctl stop firewalld

      • systemctl disable firewalld

    • 准备好两台服务器之后,在上述的两台服务器中分别安装好MySQL,并完成基础的初始化准备工作。

  • 主库配置

    • 修改配置文件/etc/my.cnf
    # mysql服务ID,保证整个集群环境中唯一,取值范围:1~2^32-1,默认为1
    server-id=1
    # 是否只读;1代表只读,0代表读写
    read-only=0
    # 忽略的数据,只不需要同步的数据库
    # binlog-ignore-db=mysql
    # 指定同步的数据库 binlog-do-db=db01
    
    • 重启MySQL服务器
    systemctl restart mysqld
    
    • 登录mysql,创建远程连接的账号,并授予主从复制权限
    # 创建itcast用户,并设置密码,该用户可在任意主机连接MySQL服务
    create user ‘itcast’@'%'IDENTIFIED with mysql_native_password by 'Root@123456';
    # 为‘itcast’@'%'用户分配主从复制权限
    crant replication slave on *.* to 'itcast'@'%';
    
    • 通过指令,查看二进制日志坐标
      • 字段含义说明:
        • file:从哪个日志文件开始推送日文件
        • position:从哪个位置开始推送日志
        • binlog_ignore_db:指定不需要同步的数据库
    show master status;
    
  • 从库配置

    • 修改配置文件/etc/my.cnf
    # mysql服务ID,保证整个集群环境中唯一,取值范围:1~2^32-1,和主库不一样即可
    server-id=2
    # 是否只读;1代表只读,0代表读写
    read-only=1
    
    • 重启MySQL服务
    systemctl restart mysqld
    
    • 登录mysql,设置主库配置
    change replication source to source_host='xxx.xxx',source_user='xxx',
    source_password='xxx',source_log_file='xxx',source_log_pos=xxx;
    
    • 上述是8.0.23中的语法。如果mysql是8.0.23之前的版本,执行如下sql
    change master to master_host='xxx.xxx.xxx.xxx',master_user='xxx',
    master_log_file='xxx',master_log_pos=xxx;
    
    参数名含义
    source_host主库IP地址
    source_user连接主库的用户名
    source_password连接主库的密码
    source_log_filebinlog日志文件名
    source_log_posbinlog日志文件位置
    • 开启同步操作
    start replica; # 8.0.22之后
    start slave; # 8.0.22之前
    
    • 查看主从同步状态
    show replica status; # 8.0.22之后
    show slave status; # 8.0.22之前
    

    读写分离

读写分离,简单地说是把对数据库的读和写操作分开,以对应不同的数据库服务器。主数据库提供写操作,从数据库提供读操作,这样能有效地减轻单台数据库的压力。

通过MyCat即可轻易实现上述功能,不仅可以支持mysql,也可以支持Oracle和Sql Server。

一主一从
  • 原理

    • MySQL的主从复制,是基于二进制日志(binlog)实现的。

      [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-JmFZrILI-1677328808189)(file://C:\Users\82391\AppData\Roaming\marktext\images\2023-02-25-17-30-07-image.png?msec=1677317408340)]

一主一从读写分离
  • 配置

    • MyCat控制后台数据库的读写分离和负载均衡有schema.xml文件datahost标签的balance属性控制

      在这里插入图片描述

  • balance配置参数

    参数值含义
    0不开启读写分离机制,所有读操作都发送到当前可用的writeHost上
    1全部的readHost与备用的writeHost都参与select语句的负载均衡(主要针对于双主双从模式)
    2所有的读写操作都随机在writeHost,readHost上分发
    3所有的读请求随机分发到writeHost对应的readHost上执行,writeHost不负担读压力。
双主双从
  • 介绍

    • 一个主机Master1用于处理所有写请求,它的从机slave1和另一台主机Master2还有它的从机Slave2负责所有读请求。

    • 当Master1主机宕机后,Master2主机负责写请求,Master1、Master2互为备机。
      在这里插入图片描述

  • 搭建

    • 主库配置(m1/m2)

      • 修改配置文件/etc/my.cnf
      # mysql服务ID,保证整个集群环境中唯一,取值范围:1~2^32-1,默认为1
      server-id=1
      # server-id=3 # m2
      # 指定同步的数据库
      binlog-do-db=db01
      binlog-do-db=db02
      binlog-do-db=db03
      # 在作为从数据库的时候,有写入操作也要更新二进制日志文件
      log-slave-updates
      
      • 重启MySQL服务器
       systemctl restart mysqld
      
      • 主库中创建账户并授权
      # 创建itcast用户,并设置密码,噶用户可以任意主机连接该MySQL服务
      create user 'itcast'@'%' identified with mysql_native_password by 'Root@123456'# 为‘itcast’@'%'用户分配主从复制权限
      grant replication slave on *.* to 'itcast'@'%';
      
      • 通过指令,查看两台主库的二进制日志坐标
      show master status;
      
    • 从库配置(s1\s2)

      • 修改配置文件/etc/my.cnf
      server-id=2
      # server-id=4
      
      • 重启mysql服务器

      • 两台从库配置关联的主库(m2\s1\s2)

        master_log_file和master_log_pos可以通过在主机上执行show master status;获得。

        change master to master_host='xxx.xxx.xxx.xxx',master_user='xxx',master_password='xxx',
        master_log_file='xxx',master_log_pos=xxx;
        
      • 启动两台从库主从复制,查看从库状态

        start slave;
        show slave status \G;
        

        在这里插入图片描述

双主双从读写分离
  • 配置

    Mycat控制后台数据库的读写分离和负载均衡由schema.xml文件datahost标签的balance属性控制,通过writeType即switchType来完成失败自动切换的。

    • 参数说明:

      • balance=“1”

        • 代表全部的readHost与stand by writeHost参与select语句的负载均衡,简单的说,当双主双从模式(M1->S1,M2->S2,并且M1与M2互为主备),正常情况下,M2,S1,S2都参与select语句的负载均衡。
      • writeType

        • 0:写操作都转发到第1台writeHost、WriteHost1挂了,会切换到WriteHost2上。

        • 1:所有的写操作都随机地发送到配置的writeHost上

      • switchType

        • -1:不自动切换

        • 1:自动切换

      在这里插入图片描述
      在这里插入图片描述

相关文章:

MySQL_主从复制读写分离

主从复制 概述 主从复制是指将主数据库的DDL和DML操作通过二进制日志传到从库服务器中,然后在从库上对这些日志重新执行(也叫重做),从而使得从库和主库的数据保持同步。 MySQL支持一台主库同时向多台从库进行复制,从…...

shell基础学习

文章目录查看shell解释器写hello world多命令处理执行变量常用系统变量自定义变量撤销变量静态变量变量提升为全局环境变量特殊变量$n$#$* $$?运算符:条件判断比较流程控制语句ifcasefor 循环while 循环read读取控制台输入基本语法:函数系统函数basenamedirname自定义函数shel…...

考虑交叉耦合因素的IPMSM无传感器改进线性自抗扰控制策略

考虑交叉耦合因素的IPMSM无传感器改进线性自抗扰控制策略一级目录二级目录三级目录控制原理ELADRC信号提取龙格贝尔观测器方波注入simulink仿真给定转速:转速环:电流环:一级目录 二级目录 三级目录 首先声明一下,本篇博客是复现…...

2023年全国最新食品安全管理员精选真题及答案5

百分百题库提供食品安全管理员考试试题、食品安全员考试预测题、食品安全管理员考试真题、食品安全员证考试题库等,提供在线做题刷题,在线模拟考试,助你考试轻松过关。 41.《中华人民共和国食品安全法》第35条规定,以下&#xff0…...

git 笔记

简介 内容介绍 介绍git怎么管理和实现的 核心概念 文件名-hash-文件内容: 可以通过文件路径定位位置, 也可以通过hash定位位置;快照: 所谓一个快照其实就是一棵树, 叶子结点是一个hash,对应一个文件, 根节点对应文件夹; 一棵树就是一个快照;commit是tree, tree将文件串联, …...

ChatGPT 的盈利潜力:我使用语言模型赚取第一笔钱的个人旅程

使用 Fiverr、Python ChatGPT 和数据科学赚钱的指南。众所周知,ChatGPT 是 12 月发生的互联网突破性事件,几乎每个人都跳过了使用 AI 赚钱的潮流。在本文中,我将分享我是如何使用 ChatGPT 赚到第一笔钱的。本文包括以下主题:回到基…...

计算机网络——问答2023自用

1、高速缓冲存储器Cache的作用? 这种局部存储器介于CPU与主存储器DRAM之间,一般由高速SRAM构成,容量小但速度快,引入它是为了减小或消除CPU与内存之间的速度差异对系统性能带来的影响 (Cache可以保存CPU刚用过或循环使…...

【1247. 交换字符使得字符串相同】

来源:力扣(LeetCode) 描述: 有两个长度相同的字符串 s1 和 s2,且它们其中 只含有 字符 "x" 和 "y",你需要通过「交换字符」的方式使这两个字符串相同。 每次「交换字符」的时候&…...

【一天一门编程语言】Lisp 语言程序设计极简教程

Lisp 语言程序设计极简教程 Lisp 是一种古老的编程语言,它的特点是拥有很高的表示能力和灵活的可扩展性,拥有大量的现成函数库,同时也是一种动态类型的语言,十分适合用来实现大规模软件系统。本文介绍了 Lisp 程序设计的基本知识,帮助读者快速上手。 一、Lisp 简介 Lis…...

全后端交互数据加密

前后端交互 通信请求使用https对请求参数进行签名,防止数据篡改对请求参数以及响应数据进行加解密app中使用ssl pinning防止抓包操作 https协议 [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-78n9M2PH-1677252127361)(安全.assets/ht…...

稀疏特征和密集特征

在机器学习中,特征是指对象、人或现象的可测量和可量化的属性或特征。特征可以大致分为两类:稀疏特征和密集特征。 稀疏特征 稀疏特征是那些在数据集中不连续出现的特征,并且大多数值为零。稀疏特征的示例包括文本文档中特定单词的存在或不存…...

Linux网络TCP sticky分析工具

1 TCP粘包 - TCP_NODELAY TCP粘包(sticky)的表现是TCP nagle算法将应用层发送的多个包进行合并后,再发送,很容易出现burst导致bcm89230丢包。由于OABR不支持流控,所以需要使用Linux tc对对应的TCP port进行流量整形。 …...

华为OD机试题,用 Java 解【DNA 序列】问题

最近更新的博客 华为OD机试 - 猴子爬山 | 机试题算法思路 【2023】华为OD机试 - 分糖果(Java) | 机试题算法思路 【2023】华为OD机试 - 非严格递增连续数字序列 | 机试题算法思路 【2023】华为OD机试 - 消消乐游戏(Java) | 机试题算法思路 【2023】华为OD机试 - 组成最大数…...

python的所有知识点+代码+注释,不看就亏死了

目录 简介 特点 搭建开发环境 版本 hello world 注释 文件类型 变量 常量 数据类型 运算符和表达式 控制语句 数组相关 函数相关 字符串相关 文件处理 对象和类,注:不是那个对象!!!!&…...

读懂分布式事务

一、概述 1.1 什么是分布式事务 事务我们都很熟悉,事务提供一种机制将一个活动涉及的所有操作纳入到一个不可分割的执行单元,组成这组操作的各个单元,要么全部成功,要么全部失败。 事务有四大特性: Atomic&#xf…...

多目标粒子群算法求解帕累托前沿Pareto,Pareto的原理,测试函数100种求解之21

目录 背影 parte前沿的定义 注意事项 基于多目标粒子群的帕累托前沿求解 主要参数 MATLAB代码 效果图 结果分析 展望 背影 在目标优化过程种,很多时候都两个或者多个目标,并且目标函数不能同时达到最优,鱼与熊掌不可兼得,这个时候可以通过求解帕累托前沿,通过帕累托前沿…...

数组:二分查找、移除数组等经典数组题

二分查找:相关题目链接:https://leetcode.cn/problems/binary-search/题目重现:给定一个 n 个元素有序的(升序)整型数组 nums 和一个目标值 target ,写一个函数搜索 nums 中的 target,如果目标值…...

负责任动物纤维标准RAF

【负责任动物纤维标准RAF】RAF-Responsible Animal Fiber, 中文翻译为负责任动物纤维标准。RAF标准包含了三个子标准,即RWS(责任羊毛标准)、RMS(责任马海毛标准)和RAS(责任羊驼毛标准)。RWS&…...

storybook使用info插件报错

报错内容: RangeErrorMaximum call stack size exceededCall StackprettyPrintvendors-node_modules_pmmmwh_react-refresh-webpack-plugin_lib_runtime_RefreshUtils_js-node_mod-4ff2dd.iframe.bundle.js:160:27undefinedvendors-node_modules_pmmmwh_react-refresh-webpack-…...

【每日一题Day129】LC1247交换字符使得字符串相同 | 贪心

交换字符使得字符串相同【LC1247】 有两个长度相同的字符串 s1 和 s2,且它们其中 只含有 字符 "x" 和 "y",你需要通过「交换字符」的方式使这两个字符串相同。 每次「交换字符」的时候,你都可以在两个字符串中各选一个字…...

性能优化之node中间件耗时

背景 中间件在node框架中是很基本的套件,使用不当很容易对页面性能造成影响。除了node服务端外,前端做的SSR项目也要特别重视这块 哪些场景会造成中间件耗时特别严重? 罪魁祸首是:await阻塞 举个例子: 1.如何得到 …...

3-1 图文并茂说明raid0,raid1, raid10, raid01, raid5等原理

文章目录简介RAID类型RAID0RAID1RAID5RAID6RAID10RAID01RAID对比图简介 一、RAID 是什么? RAID ( Redundant Array of Independent Disks )即独立磁盘冗余阵列,简称为「磁盘阵列」,其实就是用多个独立的磁盘组成在一起…...

西北工业大学大学物理(I)下2019-2020选填考题解析

单选题12个,24分。1量子数考查前三个量子数由薛定谔方程决定,最后一个关于自旋的由狄拉克方程决定由这些量子数可以给出原子的壳层结构。考试其实考的不深,记住这个表就够了。2 书上18、19章量子物理的著名实验:光电效应&#xff…...

自动化测试selenium

目录 一、为什么引入自动化测试? 二、为什么选择selenium作为自动化测试工具? 三、环境部署 四、什么是驱动?驱动的工作原理? 五、selenium的基础语法 元素定位 元素操作 点击元素 模拟键盘输入 清除对象输入的文本…...

熟悉GC常用算法,熟悉常见垃圾收集器,具有实际JVM调优实战经验

程序的栈和堆 栈先进后出,且里面的数据自动释放, 堆内的空间则需要手动释放 java python go 只管创建,不用像c,c需要手动释放空间, 因为他们都会开一个进程GC(Garbage Collector),由垃圾回收…...

常量和变量——“Python”

各位CSDN的uu们你们好呀,今天,小雅兰的内容是Python的一些基础语法噢,会讲解一些常量和变量的知识点,那么,现在就让我们进入Python的世界吧 常量和表达式 变量和类型 变量是什么 变量的语法 变量的类型 常量和表达式 …...

《蓝桥杯每日一题》KMP算法·AcWing 141. 周期

1.题目描述一个字符串的前缀是从第一个字符开始的连续若干个字符,例如 abaab 共有 55 个前缀,分别是 a,ab,aba,abaa,abaab。我们希望知道一个 N 位字符串 S 的前缀是否具有循环节。换言之,对于每…...

URL介绍

前言Internet上的每一个网页都具有一个唯一的名称标识,通常称之为URL(Uniform Resource Locator, 统一资源定位器)。它是www的统一资源定位标志,简单地说URL就是web地址,俗称“网址”。一、URL概念URL是对互联网上得到…...

学习 Python 之 Pygame 开发魂斗罗(一)

学习 Python 之 Pygame 开发魂斗罗(一)Pygame回忆Pygame1. 使用pygame创建窗口2. 设置窗口背景颜色3. 获取窗口中的事件4. 在窗口中展示图片(1). pygame中的直角坐标系(2). 展示图片(3). 给部分区域设置颜色5. 在窗口中显示文字6. 播放音乐7. 图片翻转与…...

ARM uboot 源码分析8 - uboot的环境变量

一、uboot 的环境变量基础 1、环境变量的作用 (1) 让我们可以不用修改 uboot 的源代码,而是通过修改环境变量,来影响 uboot 运行时的一些数据和特性。譬如说,通过修改 bootdelay 环境变量,就可以更改系统开机自动启动时倒数的秒…...