当前位置： 首页 > news >正文

Hbase-面试题

news 2026/2/8 19:50:28

1. Hbase-region切分 

  1. 自动切分，默认情况下
    1. 2.0版本，第一次region的数据达到256M，会进行切分，以后就是每达到10G切分一次，切分完成后，会进行负载均衡，均衡到其他regionserver
  2. 预分区+自定义rowkey
    1. 可以理解为预切分
    2. 比如预分区，每个regionserver会有10个region，每个region都有startrow和endrow
    3. 生产上必须要用预分区+自定义rowkey
    4. 预分区好了之后，即使没有数据，也会新建10个region的空文件
    5. 以后存数据的时候，会均匀的存到每个region中

2. Hbase-大合并和小合并

大合并：将过期数据删除，将文件进行合并  企业中7天进行一次
小合并：将过期数据标记，但是不会删除，只会合并邻近的文件 

3. Hbase-内存数据刷写

  1. 手动刷写
    1. 用命令刷写
  2. 定时刷写
  3. 设置参数
    1. MemStore达到128M
    2. 如果MemStore比较多，而且都没有达到128M，可以设置region的大小为512M

 4. Hbase-二级索引

 4.1. 问题

hbase查询如果过滤条件不是rowkey，就会全局遍历  

举例：

如果根据name过滤，就会全局遍历

id    name    age  
1     ikun    19

4.2. 解决

添加二级索引，其实就是再新建一个表，以name为rowkey

name  id  
ikun  1

相关文章：

Hbase-面试题

1. Hbase-region切分 自动切分，默认情况下 2.0版本，第一次region的数据达到256M，会进行切分，以后就是每达到10G切分一次，切分完成后，会进行负载均衡，均衡到其他regionserver预分区自定义rowke…...

编程日记 2023/8/9 8:37:38

图的宽度优先深度优先遍历

图常见的遍历方式有两种，一种是宽度优先遍历，一种是深度优先遍历。 宽度优先遍历 宽度优先遍历和之前介绍的二叉树的层级遍历类似，主要也是利用Queue来完成层级的遍历，除此之外，因为图中很可能有环，所以还…...

编程日记 2023/8/9 8:36:37

redis Set类型命令

Redis中的Set是一种无序、不重复的集合数据结构，它提供了一系列的操作命令用于对Set进行添加、删除和查找等操作。以下是Redis中Set类型常见的一些命令： SADD key member [member …]：将一个或多个成员添加到指定的集合中。 示例：…...

编程日记 2023/8/9 8:35:35

Netty框架自带类DefaultEventExecutorGroup的作用，用来做业务的并发

一、DefaultEventExecutorGroup的用途 DefaultEventExecutorGroup 是 Netty 框架中的一个类，用于管理和调度事件处理器（EventExecutor）的组。在 Netty 中，事件处理是通过多线程来完成的，EventExecutor 是处理事件的基…...

编程日记 2023/8/9 8:34:34

TCP的四次挥手与TCP状态转换

文章目录 四次挥手场景步骤TCP状态转换 四次挥手场景 TCP客户端与服务器断开连接的时候，在程序中使用close()函数，会使用TCP协议四次挥手。 客户端和服务端都可以主动发起。 因TCP连接时候是双向的，所以断开的时候也是双向的。 步骤 三次…...

编程日记 2023/8/9 8:33:33

【网络编程】实现一个简单多线程版本TCP服务器（附源码）

TCP多线程 🌵预备知识🎄 Accept函数🌲字节序转换函数🌳listen函数 🌴代码🌱Log.hpp🌿Makefile☘️TCPClient.cc🍀TCPServer.cc🎍 util.hpp 🌵预备知识 &…...

编程日记 2023/8/9 8:32:32

centos离线部署docker

有些内部环境需要离线部署，以下做一些备忘。 环境：centos7.9 准备文件： docker-20.10.9.tgz，下载地址 https://download.docker.com/linux/static/stable/x86_64/docker.service，内容见下文daemon.json，内…...

编程日记 2023/8/9 8:31:31

ffmpeg使用滤镜对视频进行处理播放

一、前言 在现代的多媒体处理中，视频和音频滤镜起着至关重要的作用。可以帮助开发者对视频和音频进行各种处理，如色彩校正、尺寸调整、去噪、特效添加等。而FFmpeg作为一个功能强大的开源多媒体框架，提供了丰富的滤镜库，使我们能够轻松地对多媒体文件进行处理和转换。 本…...

编程日记 2023/8/9 8:30:26

Ansible Handlers模块详解，深入理解Ansible Handlers 自动化中的关键组件

深入理解Ansible Handlers 自动化中的关键组件 在现代的IT环境中，自动化已经成为提高效率和减少错误的关键。Ansible作为一款流行的自动化工具，通过使用Playbooks来定义和执行任务。而Handlers作为Ansible的组件之一，在自动化过程中发挥着重要…...

编程日记 2023/8/9 8:29:25

threejs点击模型实现模型边缘高亮的选中效果--更改后提高帧率

先来个效果图 之前写的那个稍微有点问题，帧率只有30，参照官方代码修改后，帧率可以达到50了，在不全屏的状态下，帧率60 1.首先需要导入库 // 用于模型边缘高亮 import { EffectComposer } from "three/examples/js…...

编程日记 2023/8/9 8:28:24

RocketMQ 主备自动切换模式部署

目录 主备自动切换模式部署 Controller 部署​ Controller 嵌入 NameServer 部署​ Controller 独立部署​ Broker 部署​ 兼容性​ 升级注意事项​ 主备自动切换模式部署 该文档主要介绍如何部署支持自动主从切换的 RocketMQ 集群，其架构如上图所示&#xff…...

编程日记 2023/8/9 8:27:23

【MySQL】select相关

文章目录 迭代器distinct 关键字limit offset 关键字order by 列名 asc\descselect语句的执行顺序几点注意 迭代器 指向第一个元素 使用hasNext()进行判断后才进行取元素 resultSet：指向第一个元素前一个 distinct 关键字 去除一列中的重复元素 可以进行多行的去重…...

编程日记 2023/8/9 8:26:23

在Python中应用RSA算法实现图像加密：基于Jupyter环境的详细步骤和示例代码

一、引言 在当今的数字化社会中，信息安全问题备受关注。随着数字图像在生活中的应用越来越广泛，图像的安全性和隐私性也成为人们关心的焦点。如何在网络上安全地传输和存储图像已经成为一项重要的挑战。RSA（Rivest-Shamir-Adleman）算法作为一种被广泛应用的公钥密码体系，…...

编程日记 2023/8/9 8:25:21

Prometheus Blackbox Exporter 的 HTTP 探测指标中各个阶段的时间统计信息

在 Prometheus Blackbox Exporter 的 HTTP 探测指标中，probe_http_duration_seconds 指标包含各个阶段的时间统计信息。这些阶段代表了 HTTP 探测的不同阶段和指标。以下是各个阶段的含义： phase"dns_lookup"：这是指进行 DNS 查找…...

编程日记 2023/8/9 8:24:19

数据结构之时间复杂度-空间复杂度

大家好，我是深鱼~ 目录 1.数据结构前言 1.1什么是数据结构 1.2什么是算法 1.3数据结构和算法的重要性 1.4如何学好数据结构和算法 2.算法的效率 3.时间复杂度 3.1时间复杂度的概念 3.2大O的渐进表示法 【实例1】：双重循环的时间复杂度&#xf…...

编程日记 2023/8/9 8:23:18

新一代构建工具 maven-mvnd

新一代构建工具 maven-mvnd mvnd的前世今生下载安装 mvndIDEA集成 mvnd的前世今生 maven 作为一代经典的构建工具，流行了很多年，知道现在依然是大部分Java项目的构建工具的首选；但随着项目复杂度提高，代码量及依赖库的增多使得ma…...

编程日记 2023/8/9 8:22:17

构建Docker容器监控系统(2)(Cadvisor +Prometheus+Grafana)

Cadvisor产品简介 Cadvisor是Google开源的一款用于展示和分析容器运行状态的可视化工具。通过在主机上运行Cadvisor用户可以轻松的获取到当前主机上容器的运行统计信息，并以图表的形式向用户展示。 接着上一篇来继续 部署Cadvisor 被监控主机上部署Cadvisor容器…...

编程日记 2023/8/9 8:21:15

Leetcode.995 K 连续位的最小翻转次数

题目链接 Leetcode.995 K 连续位的最小翻转次数 rating : 1835 题目描述 给定一个二进制数组 n u m s nums nums 和一个整数 k k k 。 k k k位翻转 就是从 n u m s nums nums 中选择一个长度为 k k k 的 子数组 ，同时把子数组中的每一个 0 0 0 都改成 1 1 1 …...

编程日记 2023/8/9 8:20:14

PHP8的跳转语句-PHP8知识详解

如果循环条件满足的时候，则程序会一直执行下去。如果需要强制跳出循环，则需要使用跳转语句来完成。PHP8的跳转语句包括break语句、continue语句和goto语句。 1、break语句 break语句的作用是完全终止循环，包括while、do…while、for、switch…...

编程日记 2023/8/9 8:19:13

Idea中maven无法下载源码

今天在解决问题的时候想要下载源码，突然发现idea无法下载，这是真的蛋疼，没办法查看原因，最后发现问题的原因居然是因为Maven，由于我使用的idea的内置的Bundle3的Maven，之前没有研究过本地安装和内置的区别&…...

编程日记 2023/8/9 8:18:12

Spark 之 入门讲解详细版（1）

1、简介 1.1 Spark简介 Spark是加州大学伯克利分校AMP实验室（Algorithms, Machines, and People Lab）开发通用内存并行计算框架。Spark在2013年6月进入Apache成为孵化项目，8个月后成为Apache顶级项目，速度之快足见过人之处&…...

编程新知 2026/2/5 4:17:31

Go 语言接口详解

Go 语言接口详解 核心概念 接口定义 在 Go 语言中，接口是一种抽象类型，它定义了一组方法的集合： // 定义接口 type Shape interface {Area() float64Perimeter() float64 } 接口实现 Go 接口的实现是隐式的： // 矩形结构体…...

编程新知 2026/1/4 5:19:25

376. Wiggle Subsequence

376. Wiggle Subsequence 代码 class Solution { public:int wiggleMaxLength(vector<int>& nums) {int n nums.size();int res 1;int prediff 0;int curdiff 0;for(int i 0;i < n-1;i){curdiff nums[i1] - nums[i];if( (prediff > 0 && curdif…...

编程新知 2026/2/8 10:51:38

【AI学习】三、AI算法中的向量

在人工智能&#xff08;AI&#xff09;算法中&#xff0c;向量&#xff08;Vector&#xff09;是一种将现实世界中的数据&#xff08;如图像、文本、音频等&#xff09;转化为计算机可处理的数值型特征表示的工具。它是连接人类认知&#xff08;如语义、视觉特征&#xff09;与…...

编程新知 2026/1/1 14:01:45

数据库分批入库

今天在工作中&#xff0c;遇到一个问题&#xff0c;就是分批查询的时候&#xff0c;由于批次过大导致出现了一些问题&#xff0c;一下是问题描述和解决方案&#xff1a; 示例&#xff1a; // 假设已有数据列表 dataList 和 PreparedStatement pstmt int batchSize 1000; // …...

编程新知 2026/1/8 11:38:36

根据万维钢·精英日课6的内容，使用AI（2025）可以参考以下方法：

根据万维钢精英日课6的内容&#xff0c;使用AI&#xff08;2025&#xff09;可以参考以下方法&#xff1a; 四个洞见 模型已经比人聪明&#xff1a;以ChatGPT o3为代表的AI非常强大&#xff0c;能运用高级理论解释道理、引用最新学术论文&#xff0c;生成对顶尖科学家都有用的…...

编程新知 2026/1/10 1:08:51

安卓基础（aar）

重新设置java21的环境&#xff0c;临时设置 $env:JAVA_HOME "D:\Android Studio\jbr" 查看当前环境变量 JAVA_HOME 的值 echo $env:JAVA_HOME 构建ARR文件 ./gradlew :private-lib:assembleRelease 目录是这样的&#xff1a; MyApp/ ├── app/ …...

编程新知 2026/1/25 8:10:56

QT3D学习笔记——圆台、圆锥

类名作用Qt3DWindow3D渲染窗口容器QEntity场景中的实体&#xff08;对象或容器&#xff09;QCamera控制观察视角QPointLight点光源QConeMesh圆锥几何网格QTransform控制实体的位置/旋转/缩放QPhongMaterialPhong光照材质&#xff08;定义颜色、反光等&#xff09;QFirstPersonC…...

编程新知 2026/1/29 5:26:37

提升移动端网页调试效率：WebDebugX 与常见工具组合实践

在日常移动端开发中&#xff0c;网页调试始终是一个高频但又极具挑战的环节。尤其在面对 iOS 与 Android 的混合技术栈、各种设备差异化行为时&#xff0c;开发者迫切需要一套高效、可靠且跨平台的调试方案。过去&#xff0c;我们或多或少使用过 Chrome DevTools、Remote Debug…...

编程新知 2025/6/10 21:08:23

node.js的初步学习

那什么是node.js呢&#xff1f; 和JavaScript又是什么关系呢&#xff1f; node.js 提供了 JavaScript的运行环境。当JavaScript作为后端开发语言来说&#xff0c; 需要在node.js的环境上进行当JavaScript作为前端开发语言来说&#xff0c;需要在浏览器的环境上进行 Node.js 可…...

编程新知 2025/11/18 1:57:23