精品购物网站/台州专业关键词优化
哈希表与字典
普遍存在一种误解,认为“哈希表”和“字典”这两个术语可以互换。这种观念从根本上是不准确的,至少在计算机科学领域是如此。
字典是将键映射到值的数据结构的一般概念。而哈希表是字典的具体实现。
本质上,字典扮演着一个总体“cookie cutter”的角色,塑造了抽象概念。哈希表只是该概念的实际实现。现在我们解决了这个问题,让我们深入研究哈希表的机制及其运作方式。
哈希表基础知识
哈希表是编程领域使用最广泛的数据结构之一。事实上,如果你做过一些基本的编程,你可能已经使用过哈希表。例如,在 Python 中,内置的“字典”数据结构(不要与前面提到的字典的“概念”定义混淆)实际上在底层使用了哈希表。以下是使用这些 Python 字典的一些代码。
python# Create a dictionary of student grades
student_grades = {"John": 85,"Emily": 92,"Michael": 78,"Jessica": 95,"Ryan": 88
}# Updating a value in the Python dictionary
student_grades["Michael"] = 82# Adding a new entry to the Python dictionary
student_grades["Sarah"] = 90# Removing an entry from the Python dictionary
del student_grades["Ryan"]
从高层次上讲,哈希表是一种实现键和值查找系统的数据结构。由于每个值都与一个键相关联,因此我们可以在哈希表上执行数据操作,例如插入或删除。值得注意的是,键和值基本上可以是任何数据类型。虽然通常使用字符串,但只要您有哈希函数,几乎任何东西都可以。
等等,什么是哈希函数?
让我们稍微绕个弯来了解一下哈希函数是什么。为此,我们将探索一种类似的数据结构,该结构也存储了键和值的集合- 直接访问表。
直接访问表
与哈希表类似,直接访问表也使用键值对。每个键唯一地指向元素范围内某个槽的索引,这些元素可能包含数据,也可能不包含数据。
呃,等等——这听起来就像一个数组……?
你说的非常正确!直接访问表只是数组的一个特定实现。事实上,哈希表也是数组的另一种特定实现——准确地说是关联数组。等等,让我猜猜你在想什么……
术语太多了。我正经历一场史诗级的术语灾难!我可怜的大脑正以平均每秒 5cm³ 的速度融化,并威胁要罢工。救救我吧,不要让我遭受这种术语引发的灾难!
好的,好的,我明白了。让我帮你形象化一下我们刚才讨论的所有事物之间的关系。
如果你想要非常分类,教科书上对字典和关联数组的定义可能会有细微的差别。但是,在大多数情况下,你可以认为它们是类似的。
在直接访问表中,键表示与每个slot关联的索引。为了真正理解这一点,让我们想象所有键都存在于一个单一的“key universe”中。
“密钥宇宙”中的每个密钥都唯一地指向数组中的一个槽位。因此,这意味着数组的大小等于“密钥宇宙”中密钥的总数。
对于直接访问表,插入、删除和搜索都是常数时间操作,即 O(1)。换句话说,无论输入大小如何,执行这些操作所需的时间将保持不变。
那么如果直接访问表已经如此神奇了,我们为什么还需要哈希表呢?
让我们来看看其中的一些原因。
1. 内存使用情况
还记得我之前提到过数组中的槽位可能包含数据,也可能不包含数据吗?这意味着槽位不一定需要包含值,而可以为空。
请记住,键指向的是槽的索引,而不是槽的值。这意味着槽不一定需要包含数据。
那么为什么这个属性很重要?
考虑一个“密钥宇宙”非常巨大的场景。为了演示目的,我们假设它包含 100 亿个密钥。由于每个密钥都链接到数组中的一个槽位,因此数组的大小也将是 100 亿。换句话说,必须消耗内存才能容纳 100 亿个槽位。
但是,如果实际只使用了 10 个插槽怎么办?在这种情况下,数组将有太多冗余插槽,以至于超过 99.9% 的插槽都是空的,从而导致内存浪费和效率极低。
2. 内存不足
现在让我们想象一下,我们分配了 10 个内存单元来创建直接访问表。
由于数组的固有特性,每个槽位都会占用一定量的内存。为了演示目的,我们假设每个槽位占用 2 个内存单位。因此,如果“键宇宙”中有 5 个或更多键,我们就已经超出了内存限制:
2 个单位× 5 个槽位 = 10 个单位
这意味着直接访问表对于数据存储来说不是一个可行的选择,因为没有足够的内存来创建具有所有必要槽的数组。换句话说,如果“键域”的大小大于数组的最大大小,则无法使用直接访问表。那么,我们如何解决这个问题呢?
输入哈希表。
哈希表简介(finally……)
有了哈希表,这两个问题都可以通过引入所谓的哈希函数来解决。哈希函数可以看作是表中键和槽之间的中介。哈希函数不会直接使用键作为索引,而是将每个键转换为称为“哈希输出”的唯一标识符,该标识符决定了将存储键值对的特定槽。
注意:在哈希表中,键可以是任何数据类型,只要它们是“可哈希的”。
散列输出用作索引来确定应在数组中的何处存储相应的值。
动态内存使用
与数组具有预定义大小的直接访问表不同,哈希表可以根据存储的键数调整其大小。这种动态分配优化了内存使用率,使哈希表能够处理更大范围的键,而不会浪费不必要的内存。
碰撞
由于“密钥宇宙”现在没有预先定义的限制,因此它有可能包含无限数量的不同密钥。然而,这种开放性引入了多个密钥生成相同“散列输出”的可能性,导致不同的密钥最终被分配给数组中的同一个位置。这就是所谓的碰撞。
冲突通常被认为是不利的,原因有很多,包括性能下降、搜索时间增加以及密钥分布不均匀等。几秒钟后,我们将讨论如何处理这些情况。
良好的哈希函数
选择或设计一个精心设计的哈希函数对于创建高效的哈希表至关重要。我们不会在这里讨论所有细节,但一个好的哈希函数往往具有两个关键特征:
-
快速计算运行时间
哈希函数应设计为快速生成给定键的哈希值。通过最小化计算哈希值所需的时间,可以显著提高哈希表中插入、删除和检索操作的效率。这在处理大型数据集或时间敏感的应用程序时尤为重要。
-
通过最大化随机性来最小化碰撞
另一个重要特性是能够尽可能为不同的密钥生成不同的哈希值,从而最大限度地减少冲突的发生。好的哈希函数应该对输入密钥的哪怕是微小的变化都很敏感,从而导致计算出的哈希值发生显著变化。
这种特性称为雪崩效应,它确保密钥的微小变化会产生截然不同的哈希输出。通过这样做,多个密钥生成相同哈希输出的可能性大大降低。
处理碰撞的方法
链式
链接是一种广泛采用的哈希表冲突处理方法。它涉及使用链接列表将每个数组槽转换为 值链。
将每个“链环”视为一个不同的键值对,形成一个从数组槽中悬挂的连接链。在这个类比中,链代表链接列表,而单个“链环”则代表键值对。当发生冲突时,新的键值对会简单地附加到该槽的链中,从而有效地解决冲突。
每个“链”代表一个链表,每个“链环”代表链表中的一个节点。
链表中的每个节点都包含一个键值对。要从链式槽中检索值,需要使用哈希函数来计算索引,然后遍历与该索引关联的链表,直到找到所需的键值对。链式方法确保即使多个值存储在同一个索引中,也可以通过遵循链表结构单独访问它们。
开放寻址
开放寻址是处理哈希表中冲突的另一种替代方法。与使用链表的链接不同,开放寻址旨在将所有键值对直接存储在数组本身中。
那么这是如何实现的呢?
简而言之,当两个键被哈希到同一个数组索引时,算法会浏览数组以找到下一个可用或“开放”的插槽来存储键值对。这是通过应用特定的探测序列来完成的,该序列决定了算法检查数组插槽的顺序。
虽然所有形式的开放寻址都避免使用链接列表,但它可能会导致聚类,即数组中的连续位置被占用,这可能会导致更长的探测序列和性能下降。我们马上就会看到如何缓解这种聚类效应。
在此图中,左侧的红色箭头表示已将某个键散列到与现有键值对“cat”相同的槽位。为了使用开放寻址解决此冲突,我们遍历数组,直到找到一个空槽位。
上图是开放寻址类型的示例,称为线性探测。其他值得注意的探测序列包括二次探测和双重哈希。在深入研究后两者之前,让我们先看看线性探测。
1. 线性探测
正如我们已经看到的线性探测,如果在特定槽位发生碰撞,算法会检查数组中的每个连续槽位并继续,直到遇到空槽位或遍历整个数组。
在上面的例子中,向右移动 3 步后找到一个空槽。在下面的例子中,遍历整个数组,从发生碰撞的“WJ931”槽开始,直到回到同一位置,但最终没有找到空槽。
在上面的例子中,我开始使用整数而不是字符串来重新强调哈希表中的键和值可以是任何数据类型,只要它们是可哈希的。
2. 二次探测
与线性探测类似,二次探测是解决开放寻址冲突的另一种方法。当在特定时隙发生冲突时,该算法不会简单地检查连续的时隙。相反,它会遵循二次序列来确定下一个要检查的时隙。
该算法不是像线性探测那样检查连续的槽位,而是遵循二次序列。在这种情况下,该算法在几步之后成功找到一个空槽位,从而解决了冲突。
通过使用这个二次序列,该算法会随着探测的继续探索相距较远的槽。这有助于在整个哈希表中更均匀地分布值,从而减少前面提到的聚类效应。
3. 双重哈希
除了线性和二次探测之外,另一种先进的开放寻址技术是双重散列。双重散列引入了二次散列函数。二次散列函数获取原始散列值并对其执行单独的散列运算。
然后使用这个新的哈希值版本来确定下一次探测的步长。这个步长被添加到当前槽位索引中,算法继续探测直到找到一个空槽位。
观察示例 1 和示例 2 中的冲突如何通过不同的步长解决。这是因为辅助哈希函数为每个冲突计算不同的步长,因此允许它找到空槽而无需进行广泛的聚类。
使用双重散列有助于在散列表中更均匀地分布密钥,从而再次降低聚类的可能性。通过结合不同的散列函数来确定步长,双重散列提供了更加多样化的探测序列。
重新讨论
到目前为止,我们已经探索了各种冲突缓解技术,包括高质量哈希函数、链接和开放寻址。我们将要讨论的最后一个技术是重新哈希。
当哈希表变得太满或冲突次数超过某个阈值时,就会触发重新哈希。此过程涉及创建一个新的、更大的哈希表,并根据新的大小重新计算每个元素的哈希值。
当原始 20 个槽位的哈希表变得太满时,会触发“调整大小和重新哈希”事件。具体来说,当 12 个或更多槽位被填满时,元素将重新哈希到新的 40 个槽位的表中。通过重新哈希,元素分布得更均匀,从而减少冲突次数并提高整体性能。
需要注意的是,重新散列可能是一项资源密集型操作,因为它需要分配一个新的哈希表,重新散列所有元素,并将它们复制到新表中。然而,这是保持哈希表平衡并维持检索和插入操作效率的必要步骤。
哈希的应用
1. 消息摘要
消息摘要是消息内容的固定大小数字表示。这些“摘要”消息基本上是哈希输出,由单向加密哈希函数计算得出。该算法旨在保护传输消息的完整性。
一个例子就是从互联网上下载开源软件时。通常,除了软件之外,你还会找到一个称为签名的配套文件。此签名表示原始文件的哈希值,换句话说,就是消息摘要。它起着至关重要的作用,允许用户独立计算下载文件的哈希值并将其与提供的签名进行比较。此过程可确保下载的文件未被篡改。
2. 加密密码
哈希函数的另一个重要应用是密码加密。您是否曾经想过,为什么当您在网站上忘记密码并尝试恢复时,该网站通常会告诉您设置新密码,而不是简单地提醒您原来的密码?这种方法背后的原因是网站不存储您的实际密码;而是存储其哈希值。
此安全措施可防止未经授权的个人在访问网站数据库时获取您的密码。由于哈希函数通常是单向函数,因此几乎不可能从其哈希值中检索原始密码。因此,使用哈希可为用户密码提供额外的保护。
总结一下……
虽然很多理论上学到的数据结构在现实生活中从未真正投入使用,但哈希表却并非如此。哈希表看似神奇的效率、动态内存分配能力以及对各种数据类型的多功能性,使其成为每个程序员和计算机科学家都应该掌握的工具中的中心。理解哈希表并了解其优点和局限性是掌握算法和数据结构的关键里程碑。
你可能会问:“那么下一步是什么?”
以下是为您准备的一项有趣的家庭挑战:
使用您选择的编程语言来实现您自己的哈希表的任务,而不依赖于任何预制的数据结构库。
愿你的编程之旅继续充满冒险和启迪!
参考文档
https://forreya.medium.com/the-magic-of-hash-tables-f0a8086c820a
相关文章:

哈希表的魔力
哈希表与字典 普遍存在一种误解,认为“哈希表”和“字典”这两个术语可以互换。这种观念从根本上是不准确的,至少在计算机科学领域是如此。 字典是将键映射到值的数据结构的一般概念。而哈希表是字典的具体实现。 本质上,字典扮演着一个总体…...

《YOLO 目标检测》—— YOLO v3 详细介绍
!!!!!!!!!!!!!还未写完!!!!!!!…...

WNN 多模态整合 | Seurat 单细胞多组学整合流程
测试环境:CentOS7.9, R4.3.2, Seurat 4.4.0, SeuratObject 4.1.4 2024.10.23 # WNN library(ggplot2) library(dplyr) library(patchwork)1. 导入数据 (1). load counts of RNA and protein dyn.load(/home/wangjl/.local/lib/libhdf5_hl.so.100) library(hdf5r)…...

【Linux】磁盘文件系统(inode)、软硬链接
文章目录 1. 认识磁盘1.1 磁盘的物理结构1.2 磁盘的逻辑结构 2. 引入文件系统2.1 EXT系列文件系统的分区结构2.2 inode 3. 软硬链接3.1 软链接3.2 硬链接 在讲过了内存文件系统后,我们可以知道文件分为两种: 打开的文件(内存中)未…...

网安加·百家讲坛 | 徐一丁:金融机构网络安全合规浅析
作者简介:徐一丁,北京小西牛等保软件有限公司解决方案部总监,网络安全高级顾问。2000年开始从事网络安全工作,主要领域为网络安全法规标准研究、金融行业安全咨询与解决方案设计、信息科技风险管理评估等。对国家网络安全法规标准…...

九、pico+Unity交互开发——触碰抓取
一、VR交互的类型 Hover(悬停) 定义:发起交互的对象停留在可交互对象的交互区域。例如,当手触摸到物品表面(可交互区域)时,视为触发了Hover。 Grab(抓取) 概念ÿ…...

老机MicroServer Gen8再玩 OCP万兆光口+IT直通
手上有一台放了很久的GEN8微型服务器,放了很多年,具体什么时候买的我居然已经记不清了 只记得开始装修的时候搬家出去就没用了,结果搬出去有了第1个孩子,孩子小的时候也没时间折腾,等孩子大一点的时候,又有…...

jmeter 从多个固定字符串中随机取一个值的方法
1、先新增用户参数,将固定值设置为不同的变量 2、使用下面的函数,调用这写变量 ${__RandomFromMultipleVars(noticeType1|noticeType2|noticeType3|noticeType4|noticeType5)} 3、每次请求就是随机取的值了...

priority_queue (优先级队列的使用和模拟实现)
使用 priority_queue 优先级队列与 stack 和 queue 一样,也是一个容器适配器,其底层通过 vector 来实现的。与 stack 和 queue 不同的是,它的第一个元素总是它所包含的元素中最大或最小的一个。 也就是说,优先级队列就是数据结…...

VisionPro 手部骨骼跟踪 Skeletal Hand Tracking 虚拟首饰
骨骼手部跟踪由XR Hands Package中的Hand Subsystem提供。使用场景中的Hand Visualizer组件,用户可以显示玩家手部的蒙皮网格或每个关节的几何图形,以及用于基于手部物理交互的物理对象。用户可以直接针对Hand Subsystem编写 C# 脚本,以推断骨…...

class 9: vue.js 3 组件化基础(2)父子组件间通信
目录 父子组件之间的相互通信父组件传递数据给子组件Prop为字符串类型的数组Prop为对象类型 子组件传递数据给父组件 父子组件之间的相互通信 开发过程中,我们通常会将一个页面拆分成多个组件,然后将这些组件通过组合或者嵌套的方式构建页面。组件的嵌套…...

Laravel|Lumen项目配置信息config原理
介绍 Laravel 框架的所有配置文件都保存在 config 目录中。每个选项都有说明,你可随时查看这些文件并熟悉都有哪些配置选项可供你使用。 使用 您可以在应用程序的任何位置使用全局 config 辅助函数轻松访问配置值。 可以使用“点”语法访问配置值,其中…...

2024系统分析师考试---论区块链技术及其应用
试题三论区块链技术及其应用 区块链作为一种分布式记账技术,目前已经被应用到了资产管理、物联网、医疗管理、政务监管等多个领域,从网络层面来讲,区块链是一个对等网络(Peer to Peer,P2P),网络中的节点地位对等,每个节点都保存完整的账本数据,系统的运行不依赖中心化节…...

为您的 Raspberry Pi 项目选择正确的实时操作系统(RTOS)
在嵌入式系统设计中,实时操作系统(RTOS)的选择对于确保项目的实时性能和可靠性至关重要。Raspberry Pi,尤其是其最新的RP2040微控制器,为开发者提供了一个功能强大的平台来实现各种实时应用。本文将探讨如何为您的Rasp…...

鸿蒙应用的Tabs 组件怎么使用
鸿蒙应用中的Tabs组件是一个用于通过页签进行内容视图切换的容器组件,每个页签对应一个内容视图。以下是Tabs组件的使用方法: 一、基本结构 Tabs组件的页面组成包含两个部分,分别是TabContent和TabBar。TabContent是内容页,TabB…...

第四天 文件操作与异常处理
在Python中,文件操作是处理输入输出的基本操作之一,而异常处理则用于管理潜在的错误情况,确保程序的健壮性和稳定性。下面将介绍Python中的文件操作和异常处理的基本用法。 文件操作 打开文件 使用内置的 open() 函数可以打开一个文件&…...

【密码分析学 笔记】ch3 3.1 差分分析
ch3 分组密码的差分分析和相关分析方法 3.1 差分分析 评估分组密码安全性通用方法可用于杂凑函数和流密码安全性 预备知识: 迭代性分组密码(分组密码一般结构)简化版本 mini-AES CipherFour算法 3.1.1 差分分析原理 现象:密…...

Go:strings包的基本使用
文章目录 string前缀和后缀字符串包含判断子字符串或字符在父字符串中出现的位置字符串替换统计字符串出现次数重复字符串修改字符串大小写修剪字符串分割字符串拼接 slice 到字符串 strconv 本篇主要总结的是go中的string包的一些函数的操作讲解 string 在各个语言中&#x…...

uniapp,获取头部高度
头部自定义时候,设置获取安全区域,可以用 uni.getSystemInfoSync();接口。 <view class"statusBar" :style"{height:statusBarHeightpx}"> let SYSuni.getSystemInfoSync(); let statusBarHeightref(SYS.statusBarHeight) …...

开发面试题-更新中...
探迹科技(腾讯面试官) 1.了不了解循环屏障 2.对于java中的线程冲突有多少了解(我要算1加到1亿) 3.mysql调优怎么调(我跟他讲了explain) 4.type中ref,range,const的区别 5.我有1亿的数据量&…...

【Jmeter】jmeter指定jdk版本启动
背景: 因权限问题,不能修改操作系统的环境变量或者因jmeter启动加载的默认jdk8版本低,需要指定jdk XX版本启动Jmeter 解决办法: 进入jmeter bin目录选择jmeter.bat,记事本编辑jmeter.bat, 在最前面添加 set MINIMAL_…...

数据处理利器:图片识别转Excel表格让数据录入变简单
在现代职场中,手动录入数据是一个耗时且容易出错的过程。无论是纸质文件、照片还是截图,繁琐的输入常常让人感到头疼。如何高效地将这些信息转化为电子表格,是许多职场人士面临的挑战。 为了解决这一问题,我们推出了图片识别转Exc…...

【WPF】中Binding的应用
在 WPF (Windows Presentation Foundation) 中,数据绑定是一种强大的机制,它允许你将用户界面(UI)元素的属性与各种数据源关联起来。这种关联可以是单向的、双向的或一次性的。WPF 的数据绑定支持多种数据源,包括普通对…...

华为OD机试2024年真题(基站维修工程师)
基站维修工程师(200分) 小王是一名基站维护工程师,负责某区域的基站维护。 某地方有n个基站(1<n<10),已知各基站之间的距离s(0<s<500),并且基站x到基站y的距离,与基站y到基站x的距离并不一定会…...

在MySQL中为啥引入批量键访问(Batch Key Access, BKA)
批量键访问(Batch Key Access, BKA) 是 MySQL 在某些情况下用于优化 JOIN 操作的一种技术,特别是在通过索引进行 JOIN 时,它能有效减少查询的随机 I/O。批量键访问优化通过将一批主键或索引键一次性发送给存储引擎来查找匹配的行&…...

912.排序数组(归并排序)
目录 题目解法初始数组1. 分解阶段2. 合并阶段结果 为什么要创建长整型ll mid l ((r - l) >> 1);其中的>>是什么意思 题目 给你一个整数数组 nums,请你将该数组升序排列。 你必须在 不使用任何内置函数 的情况下解决问题,时间复杂度为 O…...

使用 cmake 在 x86 系统中为 arm 系统交叉编译程序
原理: 在 x86 系统里使用交叉编译工具链(arm 版 gcc/g)编译程序,然后放在 arm 系统里运行。 arm 版本 使用 lscpu 查看 cpu 架构 版本说明armv732 bitarmv8/arrch6464 bit 安装交叉编译工具链 # 针对 armv7 sudo apt install…...

软考(网工)——网络规划设计
文章目录 🕐综合布线1️⃣结构化布线系统2️⃣综合布线六大子系统3️⃣综合布线物理结构图 🕑网络分析与设计1️⃣网络规划设计模型2️⃣网络流量分析3️⃣网络安全技术措施表4️⃣技术评价 🕒网络结构与功能1️⃣局域网结构类型2️⃣三层架构…...

即插即用特征融合模块,即用即涨点!
特征融合(Feature Fusion)是深度学习中的一种重要技术,它可以帮助模型更好地理解数据的内在结构和规律,提高模型的性能和泛化能力。 另外,特征融合还可以提高模型的分类准确率,减少过拟合风险,…...

蓝桥算法双周赛 第 19 场 小白入门赛
打开石门 只要有相连的一样字母就可以消成一个 string s; int ans;void solve() {cin >> s;int len 0;for (int i 0;i < s.size();i ){if (s[i] L) len ;else //遇到Q{ans (len ? 1 : 0); //消除累计的Llen 0;ans ;//遇到Q}}//QLLLL时,最后遇不到Q让累计的L消…...