当前位置: 首页 > news >正文

改善网站建设/最新实时大数据

改善网站建设,最新实时大数据,做搬家广告哪家网站有优,上海网站建设公司招人目录 简单了解索引的底层数据结构 索引的概念: 索引存在的意义: 索引的使用: 索引实现的数据结构 B树 B 树 B 树的特点 B 树的优势 事物 事物的概念 事物的使用 事物的四大特性 并发可能引起的问题 脏读问题 不可重复读 幻读…

目录

简单了解索引的底层数据结构

索引的概念:

索引存在的意义:

索引的使用:

索引实现的数据结构

B树

B+ 树

B+ 树的特点

B+ 树的优势

事物

事物的概念

事物的使用

事物的四大特性

并发可能引起的问题

脏读问题

不可重复读

幻读

事物的隔离级别


简单了解索引的底层数据结构

索引的概念:

索引是一种特殊的文件,包含着对数据表里所有记录的引用指针。可以对表中的一列或多列创建索引,并指定索引的类型,各类索引有各自的数据结构实现

 索引就是为了加快查询速度;在之前学习数组的时候,我们就是通过下标直接去查找到该位置的数据,同时我们也可以称之为索引。

索引存在的意义:

索引就是通过特殊的数据结构将数据组织在一起,这样查询时就不需要通过一行行遍历去找目标数据,此时的时间复杂度仍是 O(n) ,数据量少的时候没问题,但是一旦数据量太大,就会造成开销太大;我们这里的 O(n) 每一次都要读取硬盘,它的速率会比读取内存中的数据更慢;所以我们迫切的需要索引来减低访问磁盘的次数。

虽然索引增加了查询的速率,但是减低了 增上改 的效率,并且增加了更多的内存消耗。

索引的使用:

在 MySQL 代码中语法很简单:

创建索引:
create index 索引名 on 表名(字段名);
查看索引:

show index from 表名;

删除索引:

drop index 索引名 on 表名;

要考虑对数据库表的某列或某几列创建索引,需要考虑以下几点:

  • 数据量较大,且经常对这些列进行条件查询。
  • 该数据库表的插入操作,及对这些列的修改操作频率较低。
  • 索引会占用额外的磁盘空间。

当面对数据量大时去创建一个索引,系统为了创建这个索引而消耗过多的资源,导致机器无法正常工作;所以,索引在实际开发中并不会频繁使用。

对于索引的使用不是我们想要讨论的课题,我们学习索引更主要的是想了解索引底层的数据结构。

索引实现的数据结构

我们知道索引主要是增加查询效率的,我们之前学过两个主要用于查询的数据结构。

一个是二叉搜索树,一个是哈希表

那么索引是什么呢?

先来知道为什么二叉搜索数和哈希表不能用来创建索引:

  1. 二叉搜索树:二叉搜索树在极端情况(单分支)下树的高度非常的高,那么此时的查询速率就非常低效
  2. 哈希表:哈希表的实现原理是计算哈希值用来存放数据,而对于相邻的数据之前是无法比较的

那么我们在二叉搜索树的基础上就提出了B树;

而B+ 树又是建立在B树的基础上,B树又叫 B - 树(不是B减树,是B 杠 树),是为索引量身定制的数据结构。

我们来简单认识一下B树和B+树。

B树

B树是棵N叉搜索树,每个节点具有多个key值,如图:

 有 n 个 key 就将其分为 n + 1 个子节点,每个分组如下图:

 当节点中的子树多,节点上保存的key就多,意味着同样key的个数的前提下B树的高度要远低于二叉搜索树;

树的高度越高,进行查询的时候,磁盘访问次数就越多!!!

B+ 树

B+ 又在B树的基础上作出改进( 树也是个N叉搜索树):

画图演示:

这样同样一棵树我们却只分为了 3 个域:

  我们划分出的三个域不仅存了规定的值,并且还保留了关键的 key 。

这里的 50 是整个树中最大的值,该树中不可能出现大于50 的值。

我们再划分一次:

 划分结束后类似于链表一样将其链接起来,这样整棵树的叶子节点包含了所有的数据,所有非叶子节点的 key 都出现在了叶子节点中。

这种‘链表’就是mysql组织数据的形式,当你看到一张表的时候,
实际上这个表不一定就是按照‘表格’这样的数据结构在硬盘上组织的,也有可以是按照这种书的结构组织的;(具体是那种哪种结构,取决于你表中的索引,以及数据库使用了哪种存储引擎)

B+ 树的特点

  1. 每个节点可以存在 n 个 key ,n 个 key 划分出 n 个子节点(B树的特点是划分出 n + 1 个子节点)。
  2. 每个 key 都会出现在叶子节点中,同时也是叶子节点中的最大值。
  3. B+ 树的叶子节点是首尾相连的,类似于一个链表
  4. 由于叶子节点是个完整的数据集合,只在叶子节点中存储数据表中每一行的数据,而非叶子节点只存 key 本身即可。

具体解释以下 第四点:

我们设 id 为索引,那我们存储的值就是 id,在存数据时,不会将整个集合中的数据都存入,只存入一个id,其余的仍然保存在硬盘中,有需要的时候在去硬盘中取;为什么要怎么设计呢?因为内存空间是有序的:

  

B+ 树的优势

  1.  每个节点存储多个 key ,最终会使树相对较矮,这样在查询的时候就减少了IO(输入输出)访问次数(这里IO特指的是硬盘的访问)
  2. 最后所有的查询都会落到叶子节点上,这样无论查询多少次都可以保证查询效率是同样的,保证了稳定性;(稳定性对于程序员对这个树的评估更加准确)
  3. B+ 树的所有叶子节点构成链表,因此方便了进行范围查询(比如查询学生 id 在27 ~ 36之前的就非常快 )
  4. 由于数据都存在叶子节点上,非叶子节点只存在key,导致非叶子节点所占的内存是非常小的,这些非叶子节点就可以在内存缓存或者是内存换中的一部分,这样就进一步减少了IO访问!

 至于B 树和B+ 树的代码就放在数据结构进阶的部分再继续!!!

事物

事物的概念

事务指逻辑上的一组操作,组成这组操作的各个单元,要么全部成功,要么全部失败。
在不同的环境中,都可以有事务。对应在数据库中,就是数据库事务。

为什么要有事物这个概念

在很多年前,那个时候还没有微信转账,主要是靠银行卡之间进行转账,有时候会发生很多问题,比如:转账以后,另一方没有收到!!!

又比如,现在网传,台湾那边充话费需要半个小时才能到账!

有了事物,我们这一组操作,要么一起成功,要么一起失败。大大的提高了效率;

事物存在的意义就是将多个sql语句打成一个包,要么包内全部执行成功,要么包内全部执行不成功,不存在中间状态!

事物的使用

sql执行过程:

  1. 开启事务:start transaction;
  2. 执行多条SQL语句
  3. 回滚或提交:rollback/commit;

说明:rollback即是全部失败,commit即是全部成功。

举例 :

jerry 的账户原来有10000元,而tom 只有5000元,jerry 给 tom 转账 1000后的结果: 

如果执行失败,并非是没有执行,而是执行以后将数据恢复未执行之前的状态,这个恢复的过程称之为 " 回滚 " (rollback)

例如上面这个例子,再jerry 转账过后系统崩了,但是钱却扣了;在下次重新启动系统后,就会把钱加回来!

进行回滚的时候咋知道恢复成什么样子呢?数据库中有个专门来记录事物的日志。

因此,使用事物的时候,执行sql语句开销是非常大的。

事物使用起来非常简单,但是理解起来有些难!

事物的四大特性

数据库的事物有四大关键特性(这也是面试中经常问的【八股文】)

  1. 原子性(事务中的每个sql语句都是最小的,不可再分的)
  2. 一致性(事物执行前后都是靠谱的)
  3. 持久性(事物执行的内容是存在硬盘上的,即使机器重启也不会丢失,因此数据是可持久的)
  4. 隔离性(为了解决“并发”执行事物,引起的问题)

隔离性这里重点讲解以下:

先来讲讲啥叫并发:

并发就是一个服务器为多个客户端提供服务;

如果并发是操作不同的数据,那么并发并不会造成影响,但是它并非都是操作不同数据,存在操作同一数据的情况。

例如上面的案例,假设多个用户对一个账号进行转账操作,那就会把数据搞乱。

事物的隔离性就体现在即使是并发事物操作也不会引发问题!

既然聊到并发,那就来聊聊并发可能引起的问题

并发可能引起的问题

脏读问题

什么叫脏读?

举个贴切的例子:

有一场考试中,隔壁的想抄我的答案,我故意给他看,但是后面我又将答案给改了,那么他看到的数据就是一个 “脏数据”。脏也就是无效的意思。

那么这么解决脏读的问题呢?

很简单,我们在写数据的时候给它进行加锁,mysql引入一个 “写操作加锁” 机制。加锁是会提高耗能的,同时降低了效率,也增加了隔离性。

也就是说我考试的时候不给隔壁的人看。

不可重复读

举例:

还是那一场考试,我们约定好,我写完了给他抄,不故意坑他;在我第一次写完以后(version 1)给他抄了,在抄的过程中我发现自己写错了已一道题,我就又改了(version 2)这个时候他读着读着发现数据不一样了。

这个问题就是不可重复读。

事物1 提交了数据,事物2 开始读取,事物3 又去更新了数据,此时意味着事物在多次读取数据的结果是不一样的(预期应该是一样的)这就是不可重复读。

解决方法呢也是和上面一样加锁,此时给事物 “ 读 ” 加锁   此时又进一步增加了耗能的,同时降低了效率,也进一步增加了隔离性。

幻读

说明:事物A 读取了一次   事物B  对数据进行新增或者删除并提交事物  导致读取数据列表数据多了;此时就叫做幻读。

数据库使用  “ 串行化 ”  的方式来解决此类问题,并且彻底放弃并发处理事务,改用串行的方式一行行处理事物;此时的并发程度是最低的,效率也就最低,但是隔离性确是最高的。

针对上述问题又提出了事物的隔离级别

事物的隔离级别

选用哪种级别,这时mysql内置的机制,可以通过修改mysql配置文件,来设置mysql工作环境。

具体如何使用 以及其代码在后面会写道。

相关文章:

MySQL:索引与事物

目录 简单了解索引的底层数据结构 索引的概念: 索引存在的意义: 索引的使用: 索引实现的数据结构 B树 B 树 B 树的特点 B 树的优势 事物 事物的概念 事物的使用 事物的四大特性 并发可能引起的问题 脏读问题 不可重复读 幻读…...

mybatis实战

目录配置自动下划线驼峰MyBatis解析的SQL和实际传参不符的问题传参是整型,结果是false日期比较入参是字符串入参是Date父子递归查询上下级查询方法一方法二传参数组inmapper中接口注解映射配置 自动下划线驼峰 使用mybatis的自动下划线驼峰转换 mybatis有一个选项…...

【UEFI实战】BIOS与IPMI

KCS KCS全称是Keyboard Controller Style,关于这个名称不用过多的追究,只需要知道它是系统(BIOS和OS)和BMC通信的一种基本方式即可。本文将介绍BIOS下的KCS接口,包括接口使用方式和数据。内容参考自《ipmi-second-gen…...

90%的人都不算会网络安全,这才是真正的白帽子技术【红队】

我敢说,现在网上90%的文章都没有把网络安全该学的东西讲清楚。 为什么?因为全网更多的都是在讲如何去渗透和公鸡,却没有把网安最注重的防御讲明白。 老话说得好:“攻击,是为了更好的防御。”如果连初衷都忘了&#x…...

关于vuex的使用

1.首先安装vuex npm install vuex --save 这时如果直接安装vuex,不指定版本的话,就会直接安装最新的vuex的版本。所以会出现报错。 报错就安装这个 npm install --save vuex3 2.创建文件夹, 有的时候安装好会自动创建vuex的文件夹 &#xf…...

第53篇-某商城sign参数分析-webpack【2023-03-07】

声明:该专栏涉及的所有案例均为学习使用,严禁用于商业用途和非法用途,否则由此产生的一切后果均与作者无关!如有侵权,请私信联系本人删帖! 文章目录 一、前言二、网站分析三、完整代码一、前言 今天再来试一个webpack的例子吧,网址: aHR0cHM6Ly9tLnlxYi5jb20vYmFuay9…...

探秘MySQL——排查与调优

文章目录一、问题排查一:SQL执行出错二、问题排查二:慢查询0.几个重要参数1.配置慢查询日志命令行配置(重启失效)修改配置文件(永久生效)2.查看慢查询日志3.问题排查1:Look_time耗时4.问题排查2…...

【9.数据页结构】

概述 InnoDB 的数据是按「数据页」为单位来读写的,也就是说,当需要读一条记录的时候,并不是将这个记录本身从磁盘读出来,而是以页为单位,将其整体读入内存。数据库的 I/O 操作的最小单位是页,InnoDB 数据页…...

演唱会总是抢不到票?教你用Python制作一个自动抢票脚本

人生苦短 我用python 这个大家应该都知道吧? 是中国综合类现场娱乐票务营销平台, 业务覆盖演唱会、 话剧、音乐剧、体育赛事等领域。 如何快速抢票? 那么, 今天带大家用Python来制作一个自动抢票的脚本小程序 本文源码python安…...

【系统开发】WebSocket + SpringBoot + Vue 搭建简易网页聊天室

文章目录一、数据库搭建二、后端搭建2.1 引入关键依赖2.2 WebSocket配置类2.3 配置跨域2.4 发送消息的控制类三、前端搭建3.1 自定义文件websocket.js3.2 main.js中全局引入websocket3.3 App.vue中声明websocket对象3.4 聊天室界面.vue3.5 最终效果一、数据库搭建 很简单的一个…...

Learning C++ No.14【STL No.4】

引言: 北京时间:2023/3/9/12:58,下午两点有课,现在先把引言给搞定,这样就能激励我更早的把这篇博客给写完了,万事开头难这句话还是很有道理的,刚好利用现在昏昏欲睡的时候,把这个没…...

高速PCB设计指南(八)

七、产品内部的电磁兼容性设计 1 印刷电路板设计中的电磁兼容性 1.1 印刷线路板中的公共阻抗耦合问题 数字地与模拟地分开,地线加宽。 1.2 印刷线路板的布局 ※对高速、中速和低速混用时,注意不同的布局区域。 ※对低模拟电路和数字逻辑要分离。…...

什么是腾讯云关系型数据库(MySQL/SQL Server/MariaDB/PostgreSQL详解)

什么是腾讯云关系型数据库?腾讯云关系型数据库提供 MySQL、SQL Server、MariaDB、PostgreSQL详细介绍。腾讯云关系型数据库让您在云中轻松部署、管理和扩展的关系型数据库,提供安全可靠、伸缩灵活的按需云数据库服务。腾讯云关系型数据库提供 MySQL、SQL…...

进程通信相关概念

一、概念 1.1 通信方式有哪些 管道:水管,男纸条放入水管,女看了拿走不回复 消息队列:大盒子,男放入纸条,女看了不拿走,男女都可放 共享内存:直接桌子,男放桌上&#…...

05.Java的运算符

1.运算符计算机的最基本的用途之一就是执行数学运算&#xff0c;比如&#xff1a;int a 10;int b 20;a b;a < b;上述 和 < 等就是运算符&#xff0c;即&#xff1a;对操作数进行操作时的符号&#xff0c;不同运算符操作的含义不同。作为一门计算机语言&#xff0c;Ja…...

轮转数组(力扣189)

轮转数组 题目描述&#xff1a; 给定一个整数数组 nums&#xff0c;将数组中的元素向右轮转 k 个位置&#xff0c;其中 k 是非负数。 示例1&#xff1a; 输入: nums [1,2,3,4,5,6,7], k 3 输出: [5,6,7,1,2,3,4] 解释: 向右轮转 1 步: [7,1,2,3,4,5,6] 向右轮转 2 步: [6,7…...

主流的“对象转换工具”使用示例大全以及性能的对比

目录 前言 源码地址 代码示例 引入依赖 先定两个实体用于转换 定义一个接口让所有转换器都集成 Apache BeanUtils BeanCopier bean-mapping bean-mapping-asm Dozer 自己写get/set JMapper json2json MapStruct&#xff08;推荐&#xff09; ModelMapper OriK…...

分享10个不错的C语言开源项目

今天跟大家分享10个重量级的C语言开源项目&#xff0c;C语言确实经得住考验&#xff1a; Redis&#xff1a;Redis是一个开源的高性能的键值对数据库。它以C语言编写&#xff0c;具有极高的性能和可靠性。 Nginx&#xff1a;Nginx是一个高性能的HTTP和反向代理服务器&#xff0…...

【阅读笔记】JavaScript设计模式与开发实践2--闭包与单例、策略模式

目录闭包与高阶函数Function 扩展函数柯里化函数单例模式透明的单例模式惰性单例策略模式策略模式发展策略模式实现闭包与高阶函数 Array.prototype.sort 接受一个函数当作参数&#xff0c;用户可以自行在该函数内指定排序方式 // 由小到大排序 let res [1, 4, 2].sort((a, …...

设计模式(二十)----行为型模式之责任链模式

1、概述 在现实生活中&#xff0c;常常会出现这样的事例&#xff1a;一个请求有多个对象可以处理&#xff0c;但每个对象的处理条件或权限不同。例如&#xff0c;公司员工请假&#xff0c;可批假的领导有部门负责人、副总经理、总经理等&#xff0c;但每个领导能批准的天数不同…...

数据持久化层--冷热分离

业务场景 有一个系统的主要功能是这样的:它会对接客户的邮件服务器,自动收取发到几个特定客服邮箱的邮件,每收到一封客服邮件,就自动生成一个工单。之后系统就会根据一些规则将工单分派给不同的客服专员处理。 这家媒体集团客户两年多产生了近2000万的工单,工单的操作记…...

Ubuntu16.04系统 VSCode中python开发插件的安装

VSCode中python开发插件的安装 1. python python插件提供了代码分析&#xff0c;高亮&#xff0c;规范化等很多基本功能 2. Python for vscode 3. Python Preview 实时可视化你的代码结果。如果你Leedcode等题时&#xff0c;可以安装这个插件。能为VSCode切换各种主题皮肤…...

buuctf-pwn write-ups (12)

文章目录buu093-wustctf2020_easyfastbuu094-ciscn_2019_es_1buu095-wdb2018_guessbuu096-gyctf_2020_some_thing_excetingbuu097-axb_2019_heapbuu098-oneshot_tjctf_2016buu099-护网杯_2018_gettingstartbuu100-wustctf2020_number_gamebuu101-zctf2016_note2buu093-wustctf2…...

Linux- 系统随你玩之--网络上的黑客帝国

文章目录1、前言2、TCPDump介绍2.1、问题来了&#xff1a; 所有用户都可以采用该命令吗&#xff1f;2.2、抓包原理2.3、特点2.3.1、参数化支持2.2.2、 TCP功能3、 服务器安装Tcpdump3.1、安装3.2、检查安装是否正常。4、tcpdump 命令4.1、常用功能选项4.2、输出内容5、实操5.1、…...

Python每日一练(20230312)

目录 1. 提示用户输入的简单菜单 ★ 2. 字母异位词分组 ★★ 3. 俄罗斯套娃信封问题 ★★★ &#x1f31f; 每日一练刷题专栏 C/C 每日一练 ​专栏 Python 每日一练 专栏 1. 提示用户输入的简单菜单 如果用户选择菜单选项1&#xff0c;提示用户输入1到10之间的整数&a…...

人生又有几个四年

机缘 不知不觉&#xff0c;已经来 csdn 创作四周年啦~ 我是在刚工作不到一年的时候接触 csdn 的&#xff0c;当时在学习 node&#xff0c;对 node 的文件相关的几个 api 总是搞混&#xff0c;本来还想着在传统的纸质笔记本上记一下&#xff0c;但是想想我大学记了好久的笔记本…...

第九章:Java集合

第九章&#xff1a;Java集合 9.1&#xff1a;Java集合框架概述 数组、集合都是对多个数据进行存储(内存层面&#xff0c;不涉及持久化)操作的结构&#xff0c;简称Java容器。 数组存储多个数据方面的特点 一旦初始化以后&#xff0c;其长度就确定了。数组一旦定义好&#xff…...

嵌入式学习笔记——STM32的USART通信概述

文章目录前言常用通信协议分类及其特征介绍通信协议通信协议分类1.同步异步通信2.全双工/半双工/单工3.现场总线/板级总线4. 串行/并行通信5. 有线通信、无线通信STM32通信协议的配置方式使用通信协议控制器实现使用IO口模拟的方式实现STM32串口通信概述什么是串口通信STM32F40…...

MySQL性能优化

MySQL性能调优 存储数据类型优化 尽量避免使用 NULL尽量使用可以的最小数据类型。但也要确保没有低估需要存储的范围整型比字符串操作代价更低使用 MySQL 内建的数据类型&#xff08;比如date、time、datetime&#xff09;&#xff0c;比用字符串更快 基本数据类型 数字 整数…...

C语言/动态通讯录

本文使用了malloc、realloc、calloc等和内存开辟有关的函数。 文章目录 前言 二、头文件 三、主界面 四、通讯录功能函数 1.全代码 2.增加联系人 3.删除联系人 4.查找联系人 5.修改联系人 6.展示联系人 7.清空联系人 8.退出通讯录 总结 前言 为了使用通讯录时&#xff0c;可以…...