当前位置： 首页 > news >正文

Lucene及概念介绍

news 文章来源：https://blog.csdn.net/Day_and_Night_2017/article/details/137195550 2024/11/15 9:15:56

Lucene及概念介绍

  • 基础概念
  • 倒排索引
  • 索引合并
  • 分析
  • 查询语句的构成

基础概念

Document：我们一次查询或更新的载体，对比于实体类
Field：字段，是key-value格式的数据，对比实体类的字段
Item：一个单词，这个单词就是建立倒排索引的一项
Token：一个Item的一次匹配，包含Item、开始位置、结束位置、类型等信息。

倒排索引

在这里插入图片描述
倒排索引相当于做了两个操作：

  1. 分词
  2. 建立索引

分词就是把文本进行分割，形成多个小的Item，建立索引就是将分词和原数据建立关联关系。

索引合并

单个索引会分割成多个小块进行存储，而这些小块一经写入不会再更新。当我们的查询设计到多个小块时，查询效率会降低，因此需要合并多个小块来提升查询效率，这个操作就是索引合并。索引合并是需要占用IO的，因此一般不要强制索引合并。

分析

原始Document拆分成倒排索引和新的查询语句拆分成允许被搜索的选项的操作都会涉及到”分析“

分词器：将文本进行分割，拆分成索引的工具

映射器：对文本进行处理，映射成其他数据

过滤器：对拆分后的文本进行过滤，例如隐私处理等。

三个部分的处理顺序如下：
在这里插入图片描述

查询语句的构成

查询语句主要分为term和操作符两部分，term就是分词的匹配项，而操作符用于描述本次查询的多个term之间的匹配关系

操作符作用
AND表示同时匹配关系
OR表示同时或关系
NOT表示同时否定匹配关系
+表示同时确认匹配关系
-表示否定匹配关系
()表示关系优先级绑定
?表示单字符通配
*表示多字符通配
~表示模糊查询
[]表示闭区间范围查询
{}表示开区间范围查询

相关文章：

Lucene及概念介绍

Lucene及概念介绍 基础概念倒排索引索引合并分析查询语句的构成 基础概念 Document：我们一次查询或更新的载体，对比于实体类 Field：字段，是key-value格式的数据，对比实体类的字段 Item：一个单词&#xff0…...

编程日记 2024/4/1 14:45:19

密码算法概论

基本概念 什么是密码学？ 简单来说，密码学就是研究编制密码和破译密码的技术科学 例题： 密码学的三个阶段 古代到1949年：具有艺术性的科学1949到1975年：IBM制定了加密标准DES1976至今：1976年开创了公钥密…...

编程日记 2024/4/1 14:43:16

实时数仓之实时数仓架构(Hudi)

目前比较流行的实时数仓架构有两类，其中一类是以FlinkDoris为核心的实时数仓架构方案；另一类是以湖仓一体架构为核心的实时数仓架构方案。本文针对FlinkHudi湖仓一体架构进行介绍，这套架构的特点是可以基于一套数据完全实现Lambda架构。实时数…...

编程日记 2024/4/1 14:42:14

2022-04-15_for循环等_作业

for循环 编写程序数一下 1到 100 的所有整数中出现多少个数字9计算1/1-1/21/3-1/41/5 …… 1/99 - 1/100 的值&#xff0c;打印出结果求10 个整数中最大值在屏幕上输出9*9乘法口诀表二分查找 编写程序数一下 1到 100 的所有整数中出现多少个数字9 #include <stdio.h>in…...

编程日记 2024/4/1 14:41:13

脑机辅助推导算法

目录 一&#xff0c;背景 二&#xff0c;华容道中道 1&#xff0c;问题 2&#xff0c;告诉脑机如何编码一个正方形格子 3&#xff0c;让脑机汇总信息 4&#xff0c;观察图&#xff0c;得到启发式算法 5&#xff0c;根据启发式算法求出具体解 6&#xff0c;可视化 一&am…...

编程日记 2024/4/1 14:36:05

【原创教程】三菱FX PLC控制FR-E740变频器

变频器的使用 1. 使用三菱FX PLC 控制变频器时，接线图请按下图所示接线。 各个端子的说明如下： R、S、T：变频器电源，E740变频器电源位3相380V。 STF：正转启动， STF信号ON时为正转、OFF时为停止指令。 STR ：反转启动，STR信号ON时为反转、OFF时为停止指令。 RH、RM、RL…...

编程日记 2024/4/1 14:35:04

重读Java设计模式: 深入探讨建造者模式，构建复杂对象的优雅解决方案

引言 在软件开发中&#xff0c;有时需要构建具有复杂结构的对象&#xff0c;如果直接使用构造函数或者 setter 方法逐个设置对象的属性&#xff0c;会导致代码变得冗长、难以维护&#xff0c;并且容易出错。为了解决这个问题&#xff0c;我们可以使用建造者模式。 一、建造者…...

编程日记 2024/4/1 14:33:01

C语言数据结构易错知识点（6）（快速排序、归并排序、计数排序）

快速排序属于交换排序&#xff0c;交换排序还有冒泡排序&#xff0c;这个太简单了&#xff0c;这里就不再讲解。 归并排序和快速排序都是采用分治法实现的排序&#xff0c;理解它们对分支思想的感悟会更深。 计数排序属于非比较排序&#xff0c;在数据集中的情况下可以考虑使…...

编程日记 2024/4/1 14:30:58

使用 React Router v6.22 进行导航

使用 React Router v6.22 进行导航 React Router v6.22 是 React 应用程序中最常用的路由库之一&#xff0c;提供了强大的导航功能。本文将介绍如何在 React 应用程序中使用 React Router v6.22 进行导航。 安装 React Router 首先&#xff0c;我们需要安装 React Router v6…...

编程日记 2024/4/1 14:27:55

单链表的插入和删除

一、插入操作 按位序插入&#xff08;带头结点&#xff09;&#xff1a; ListInsert(&L,i,e):插入操作。在表L中的第i个位置上插入指定元素e。 typedef struct LNode{ElemType data;struct LNode *next; }LNode,*LinkList;//在第i 个位置插插入元素e (带头结点) bool Li…...

编程日记 2024/4/1 14:26:54

全量知识系统 之“程序”详细设计 之 “絮”---开端“元素周期表”表示的一个“打地鼠”游戏

全量知识系统 之“程序”详细设计 概述-概要和纪要 序 絮&#xff08;一个极简的开场白--“全量知识系统”自我介绍&#xff09; 将整个“人生”的三个阶段 比作“幼稚园”三班 &#xff1a; 第一步【想】-- “感性”思维游戏&#xff1a;打地鼠 。学前教育-新生期&#x…...

编程日记 2024/4/1 14:24:51

【详细讲解WebView的使用与后退键处理】

&#x1f3a5;博主&#xff1a;程序员不想YY啊 &#x1f4ab;CSDN优质创作者&#xff0c;CSDN实力新星&#xff0c;CSDN博客专家 &#x1f917;点赞&#x1f388;收藏⭐再看&#x1f4ab;养成习惯 ✨希望本文对您有所裨益&#xff0c;如有不足之处&#xff0c;欢迎在评论区提出…...

编程日记 2024/4/1 14:22:49

【Linux多线程】生产者消费者模型

【Linux多线程】生产者消费者模型 目录 【Linux多线程】生产者消费者模型生产者消费者模型为何要使用生产者消费者模型生产者消费者的三种关系生产者消费者模型优点基于BlockingQueue的生产者消费者模型C queue模拟阻塞队列的生产消费模型 伪唤醒情况&#xff08;多生产多消费的…...

编程日记 2024/4/1 14:21:48

Django屏蔽Server响应头信息

一、背景 最近我们被安全部门的漏洞扫描工具扫出了一个服务端口的漏洞。这个服务本身是一个Django启动的web服务&#xff0c;并且除了登录页面&#xff0c;其它页面或者接口都需要进行登录授权才能进行访问。 漏洞扫描信息和提示修复信息如下: 自然这些漏洞如何修复&#xff0c…...

编程日记 2024/4/1 14:20:46

前端对数据进行分组和计数处理

js对数组数据的处理&#xff0c;添加属性&#xff0c;合并表格数据。 let data[{id:1,group_id:111},{id:2,group_id:111},{id:3,group_id:111},{id:4,group_id:222},{id:5,group_id:222} ]let tempDatadata; tempDatatempData.reduce((arr,item)>{let findarr.find(i>i…...

编程日记 2024/4/1 14:17:43

synchronized 和 lock

synchronized 和 Lock 都是 Java 中用于实现线程同步的机制&#xff0c;它们都可以保证线程安全。 # synchronized 介绍与使用 synchronized 可用来修饰普通方法、静态方法和代码块&#xff0c;当一个线程访问一个被 synchronized 修饰的方法或者代码块时&#xff0c;会自动获…...

编程日记 2024/4/1 14:16:42

ssh 公私钥（github）

一、生成ssh公私钥 生成自定义名称的SSH公钥和私钥对&#xff0c;需要使用ssh-keygen命令&#xff0c;这是大多数Linux和Unix系统自带的标准工具。下面&#xff0c;简单展示如何使用ssh-keygen命令来生成具有自定义名称的SSH密钥对。 步骤 1: 打开终端 首先&#xff0c;打开我…...

编程日记 2024/4/1 14:14:39

LangChain入门：8.打造自动生成广告文案的应用程序

在这篇技术博文中，我们将探讨如何利用LangChain框架的模板管理、变量提取和检查、模型切换以及输出解析等优势，打造一个自动生成广告文案的应用程序。 LangChain框架的优势 在介绍应用程序之前，让我们先了解一下LangChain框架的几个优势： 模板管理： 在大型项目中，文案可…...

编程日记 2024/4/1 14:11:36

AI如何影响装饰器模式与组合模式的选择与应用

​&#x1f308; 个人主页&#xff1a;danci_ &#x1f525; 系列专栏&#xff1a;《设计模式》《MYSQL应用》 &#x1f4aa;&#x1f3fb; 制定明确可量化的目标&#xff0c;坚持默默的做事。 &#x1f680; 转载自热榜文章&#xff1a;设计模式深度解析&#xff1a;AI如何影响…...

编程日记 2024/4/1 14:10:35

【C语言环境】Sublime中运行C语言时MinGW环境的安装

要知道&#xff0c;GCC 官网提供的 GCC 编译器是无法直接安装到 Windows 平台上的&#xff0c;如果我们想在 Windows 平台使用 GCC 编译器&#xff0c;可以安装 GCC 的移植版本。 目前适用于 Windows 平台、受欢迎的 GCC 移植版主要有 2 种&#xff0c;分别为 MinGW 和 Cygwin…...

编程日记 2024/4/1 14:09:33

Ubuntu18.04 下Ublox F9P 实现RTK (利用CORS服务无需自建基站)

本内容参考如下连接：Ubuntu下Ublox F9P利用CORS服务无需自建基站实现RTK-CSDN博客 一、Ublox F9P 硬件模块示意图 图中展示了Ublox F9P的接口，包括串口2(`UART1`和`UART2`)，USB1。需要人为通过u-center（Ublox F9P的显示软件）软件设置以下功能： Ublox通过`UART1`向PC端发送…...

编程日记 2024/4/1 14:05:28

springboot+vue在idea上面的使用小结

1.在mac上面删除java的jdk方法&#xff1a; sudo rm -rfjdk的路径 sudo rm -rf /Users/like/Library/Java/JavaVirtualMachines/corretto-17.0.10/Contents/Home 2.查询 Mac的jdk版本和路径&#xff1a; /usr/libexec/java_home -V 3.mac上面查询和关闭idea的网页端口&…...

编程日记 2024/4/1 14:01:22

MyEclipse将项目的开发环境与服务器的JDK 版本保持一致

前言 我们使用MyEclipse开发Java项目开发中&#xff0c;偶尔会遇到因项目开发环境不协调&#xff0c;导致这样那样的问题&#xff0c;在这里以把所有环境调整为JDK1.6 为例。 操作步骤 1.Window-->Preferences-->Java-->Installed JRES 修改为 1.6版本 2.Window-->…...

编程日记 2024/4/1 14:00:21

为BUG编程：函数重载的烦恼 char *匹配bool而不是string

初级代码游戏的专栏介绍与文章目录-CSDN博客 我的github&#xff1a;codetoys&#xff0c;所有代码都将会位于ctfc库中。已经放入库中我会指出在库中的位置。 这些代码大部分以Linux为目标但部分代码是纯C的&#xff0c;可以在任何平台上使用。 这是一个BUG。 运行环境为linu…...

编程日记 2024/4/1 13:58:19

C++第十四弹---模板初阶

✨个人主页&#xff1a; 熬夜学编程的小林 &#x1f497;系列专栏&#xff1a; 【C语言详解】 【数据结构详解】【C详解】 目录 1、泛型编程 2、函数模板 2.1、函数模板的概念 2.2、函数模板的格式 2.3、函数模板的原理 2.4、函数模板的实例化 2.5、模板参数的匹配原则 …...

编程日记 2024/4/1 13:55:15

C++--内联函数

当调用一个函数时&#xff0c;程序就会跳转到该函数&#xff0c;函数执行完毕后&#xff0c;程序又返回到原来调用该函数的位置的下一句。 函数的调用也需要花时间&#xff0c;C中对于功能简单、规模小、使用频繁的函数&#xff0c;可以将其设置为内联函数。 内联函数&#xff…...

编程日记 2024/4/1 13:54:14

java数组与集合框架（一） -- 数据结构，数组

数据结构 概述 为什么要讲数据结构&#xff1f; 任何一个有志于从事IT领域的人员来说&#xff0c;数据结构&#xff08;Data Structure&#xff09;是一门和计算机硬件与软件都密切相关的学科&#xff0c;它的研究重点是在计算机的程序设计领域中探讨如何在计算机中组织和存储…...

编程日记 2024/4/1 13:51:10

React 应用实现监控可观测性最佳实践

前言 React 是一个用于构建用户界面的 JavaScript 框架。它采用了虚拟 DOM 和 JSX&#xff0c;提供了一种声明式的、组件化的编程模型&#xff0c;以便更高效地构建用户界面。无论是简单还是复杂的界面&#xff0c;React 都可以胜任。 YApi 是使用 React 编写的高效、易用、功…...

编程日记 2024/4/1 13:48:07

批处理（Batch）把Excel文件xls格式和xlsx格式进行互换

批处理&#xff08;Batch&#xff09;把Excel文件xls格式改成xlsx格式以及xlsx格式改为xls格式。 Case1:xls转xlsx - 单个文件.bat $Excel New-Object -ComObject Excel.Application $Excel.Visible $false $Workbook $Excel.Workbooks.Open("C:\Test\Excel\1.xls&qu…...

编程日记 2024/4/1 13:47:05

Adobe ColdFusion 任意文件读取漏洞复现(CVE-2024-20767)

0x01 产品简介 Adobe ColdFusion是美国奥多比（Adobe）公司的一套快速应用程序开发平台。该平台包括集成开发环境和脚本语言，将可扩展、改变游戏规则且可靠的产品的愿景变为现实。 0x02 漏洞概述 由于 Adobe ColdFusion 的访问控制不当，未经身份认证的远程攻击者可以构造恶…...

编程日记 2024/4/1 13:46:04

php网站案例/杭州专业seo公司

基于arcgis访问postgis的方法 一、连接界面(基于arcgis desktop 10.4.1版本) postgresql数据库ipv4配置参数情况: 配置文件&#xff1a;D:\Program Files\PostgreSQL\9.4\data\pg_hba.conf # IPv4 local connections: host all all 127.0.0.1/32…...

编程日记 2024/11/15 6:34:49

网站功能设计指什么/百度一下浏览器

卡卡小课堂---第五堂课---主要是卡卡在社群中分享的一些小技巧课程总结&#xff0c;在小课堂里可以学习到一些很简单但是确很实用的技巧&#xff0c;获得不错的效果。如果想要分享更多的技巧方法&#xff0c;可以私戳卡卡的窗哟~本次主要分享的内容是-关于稿定设计H5的那些事儿…...

编程日记 2024/11/15 4:37:36

上海网站外包/seo查询排名系统

当您听到“软件测试”这个术语时&#xff0c;您是否会想到一种特定类型的测试——例如功能测试或回归测试——或者您是否立即开始将复杂的、相互关联的测试类型和技术网络可视化&#xff0c;这些测试类型和技术构成了广泛的测试世界。 大多数有经验的开发人员都明白&#xff0c…...

编程日记 2024/11/15 1:45:37

电子商务网站建设开发文档/搜索引擎优化哪些方面

这道题是让求派出机器人的最少数量&#xff0c;乍一看以为是简单的求最小路径覆盖&#xff0c;后来发现错了&#xff0c;因为有的点可以走多次&#xff0c;而二分中每个点只能走一次&#xff0c;所以要先用floyd进行传递闭包&#xff0c;然后用二分 #include<stdio.h> #i…...

编程日记 2024/11/14 20:40:53

推上网站/今天《新闻联播》回放

2019独角兽企业重金招聘Python工程师标准>>> 转载于:https://my.oschina.net/u/938986/blog/299559...

编程日记 2024/11/14 20:12:05

dw做存资料网站/怎么制作网站二维码

例题&#xff11; 分金条问题 你让工人为你工作&#xff17;天&#xff0c;给工人的回报是一根金条。金条平分成相连的&#xff17;段&#xff0c;你必须在每天结束时给他们一段金条&#xff0c;如果只许你两次把金条弄断&#xff0c;你如何给你的工人付费&#xff1f; 例题2 …...

编程日记 2024/11/14 16:49:07