当前位置： 首页 > news >正文

Hbase-面试题

news 2026/2/8 8:29:15

1. Hbase-region切分 

  1. 自动切分，默认情况下
    1. 2.0版本，第一次region的数据达到256M，会进行切分，以后就是每达到10G切分一次，切分完成后，会进行负载均衡，均衡到其他regionserver
  2. 预分区+自定义rowkey
    1. 可以理解为预切分
    2. 比如预分区，每个regionserver会有10个region，每个region都有startrow和endrow
    3. 生产上必须要用预分区+自定义rowkey
    4. 预分区好了之后，即使没有数据，也会新建10个region的空文件
    5. 以后存数据的时候，会均匀的存到每个region中

2. Hbase-大合并和小合并

大合并：将过期数据删除，将文件进行合并  企业中7天进行一次
小合并：将过期数据标记，但是不会删除，只会合并邻近的文件 

3. Hbase-内存数据刷写

  1. 手动刷写
    1. 用命令刷写
  2. 定时刷写
  3. 设置参数
    1. MemStore达到128M
    2. 如果MemStore比较多，而且都没有达到128M，可以设置region的大小为512M

 4. Hbase-二级索引

 4.1. 问题

hbase查询如果过滤条件不是rowkey，就会全局遍历  

举例：

如果根据name过滤，就会全局遍历

id    name    age  
1     ikun    19

4.2. 解决

添加二级索引，其实就是再新建一个表，以name为rowkey

name  id  
ikun  1

相关文章：

Hbase-面试题

1. Hbase-region切分 自动切分，默认情况下 2.0版本，第一次region的数据达到256M，会进行切分，以后就是每达到10G切分一次，切分完成后，会进行负载均衡，均衡到其他regionserver预分区自定义rowke…...

编程日记 2023/8/9 8:37:38

图的宽度优先深度优先遍历

图常见的遍历方式有两种，一种是宽度优先遍历，一种是深度优先遍历。 宽度优先遍历 宽度优先遍历和之前介绍的二叉树的层级遍历类似，主要也是利用Queue来完成层级的遍历，除此之外，因为图中很可能有环，所以还…...

编程日记 2023/8/9 8:36:37

redis Set类型命令

Redis中的Set是一种无序、不重复的集合数据结构，它提供了一系列的操作命令用于对Set进行添加、删除和查找等操作。以下是Redis中Set类型常见的一些命令： SADD key member [member …]：将一个或多个成员添加到指定的集合中。 示例：…...

编程日记 2023/8/9 8:35:35

Netty框架自带类DefaultEventExecutorGroup的作用，用来做业务的并发

一、DefaultEventExecutorGroup的用途 DefaultEventExecutorGroup 是 Netty 框架中的一个类，用于管理和调度事件处理器（EventExecutor）的组。在 Netty 中，事件处理是通过多线程来完成的，EventExecutor 是处理事件的基…...

编程日记 2023/8/9 8:34:34

TCP的四次挥手与TCP状态转换

文章目录 四次挥手场景步骤TCP状态转换 四次挥手场景 TCP客户端与服务器断开连接的时候，在程序中使用close()函数，会使用TCP协议四次挥手。 客户端和服务端都可以主动发起。 因TCP连接时候是双向的，所以断开的时候也是双向的。 步骤 三次…...

编程日记 2023/8/9 8:33:33

【网络编程】实现一个简单多线程版本TCP服务器（附源码）

TCP多线程 🌵预备知识🎄 Accept函数🌲字节序转换函数🌳listen函数 🌴代码🌱Log.hpp🌿Makefile☘️TCPClient.cc🍀TCPServer.cc🎍 util.hpp 🌵预备知识 &…...

编程日记 2023/8/9 8:32:32

centos离线部署docker

有些内部环境需要离线部署，以下做一些备忘。 环境：centos7.9 准备文件： docker-20.10.9.tgz，下载地址 https://download.docker.com/linux/static/stable/x86_64/docker.service，内容见下文daemon.json，内…...

编程日记 2023/8/9 8:31:31

ffmpeg使用滤镜对视频进行处理播放

一、前言 在现代的多媒体处理中，视频和音频滤镜起着至关重要的作用。可以帮助开发者对视频和音频进行各种处理，如色彩校正、尺寸调整、去噪、特效添加等。而FFmpeg作为一个功能强大的开源多媒体框架，提供了丰富的滤镜库，使我们能够轻松地对多媒体文件进行处理和转换。 本…...

编程日记 2023/8/9 8:30:26

Ansible Handlers模块详解，深入理解Ansible Handlers 自动化中的关键组件

深入理解Ansible Handlers 自动化中的关键组件 在现代的IT环境中，自动化已经成为提高效率和减少错误的关键。Ansible作为一款流行的自动化工具，通过使用Playbooks来定义和执行任务。而Handlers作为Ansible的组件之一，在自动化过程中发挥着重要…...

编程日记 2023/8/9 8:29:25

threejs点击模型实现模型边缘高亮的选中效果--更改后提高帧率

先来个效果图 之前写的那个稍微有点问题，帧率只有30，参照官方代码修改后，帧率可以达到50了，在不全屏的状态下，帧率60 1.首先需要导入库 // 用于模型边缘高亮 import { EffectComposer } from "three/examples/js…...

编程日记 2023/8/9 8:28:24

RocketMQ 主备自动切换模式部署

目录 主备自动切换模式部署 Controller 部署​ Controller 嵌入 NameServer 部署​ Controller 独立部署​ Broker 部署​ 兼容性​ 升级注意事项​ 主备自动切换模式部署 该文档主要介绍如何部署支持自动主从切换的 RocketMQ 集群，其架构如上图所示&#xff…...

编程日记 2023/8/9 8:27:23

【MySQL】select相关

文章目录 迭代器distinct 关键字limit offset 关键字order by 列名 asc\descselect语句的执行顺序几点注意 迭代器 指向第一个元素 使用hasNext()进行判断后才进行取元素 resultSet：指向第一个元素前一个 distinct 关键字 去除一列中的重复元素 可以进行多行的去重…...

编程日记 2023/8/9 8:26:23

在Python中应用RSA算法实现图像加密：基于Jupyter环境的详细步骤和示例代码

一、引言 在当今的数字化社会中，信息安全问题备受关注。随着数字图像在生活中的应用越来越广泛，图像的安全性和隐私性也成为人们关心的焦点。如何在网络上安全地传输和存储图像已经成为一项重要的挑战。RSA（Rivest-Shamir-Adleman）算法作为一种被广泛应用的公钥密码体系，…...

编程日记 2023/8/9 8:25:21

Prometheus Blackbox Exporter 的 HTTP 探测指标中各个阶段的时间统计信息

在 Prometheus Blackbox Exporter 的 HTTP 探测指标中，probe_http_duration_seconds 指标包含各个阶段的时间统计信息。这些阶段代表了 HTTP 探测的不同阶段和指标。以下是各个阶段的含义： phase"dns_lookup"：这是指进行 DNS 查找…...

编程日记 2023/8/9 8:24:19

数据结构之时间复杂度-空间复杂度

大家好，我是深鱼~ 目录 1.数据结构前言 1.1什么是数据结构 1.2什么是算法 1.3数据结构和算法的重要性 1.4如何学好数据结构和算法 2.算法的效率 3.时间复杂度 3.1时间复杂度的概念 3.2大O的渐进表示法 【实例1】：双重循环的时间复杂度&#xf…...

编程日记 2023/8/9 8:23:18

新一代构建工具 maven-mvnd

新一代构建工具 maven-mvnd mvnd的前世今生下载安装 mvndIDEA集成 mvnd的前世今生 maven 作为一代经典的构建工具，流行了很多年，知道现在依然是大部分Java项目的构建工具的首选；但随着项目复杂度提高，代码量及依赖库的增多使得ma…...

编程日记 2023/8/9 8:22:17

构建Docker容器监控系统(2)(Cadvisor +Prometheus+Grafana)

Cadvisor产品简介 Cadvisor是Google开源的一款用于展示和分析容器运行状态的可视化工具。通过在主机上运行Cadvisor用户可以轻松的获取到当前主机上容器的运行统计信息，并以图表的形式向用户展示。 接着上一篇来继续 部署Cadvisor 被监控主机上部署Cadvisor容器…...

编程日记 2023/8/9 8:21:15

Leetcode.995 K 连续位的最小翻转次数

题目链接 Leetcode.995 K 连续位的最小翻转次数 rating : 1835 题目描述 给定一个二进制数组 n u m s nums nums 和一个整数 k k k 。 k k k位翻转 就是从 n u m s nums nums 中选择一个长度为 k k k 的 子数组 ，同时把子数组中的每一个 0 0 0 都改成 1 1 1 …...

编程日记 2023/8/9 8:20:14

PHP8的跳转语句-PHP8知识详解

如果循环条件满足的时候，则程序会一直执行下去。如果需要强制跳出循环，则需要使用跳转语句来完成。PHP8的跳转语句包括break语句、continue语句和goto语句。 1、break语句 break语句的作用是完全终止循环，包括while、do…while、for、switch…...

编程日记 2023/8/9 8:19:13

Idea中maven无法下载源码

今天在解决问题的时候想要下载源码，突然发现idea无法下载，这是真的蛋疼，没办法查看原因，最后发现问题的原因居然是因为Maven，由于我使用的idea的内置的Bundle3的Maven，之前没有研究过本地安装和内置的区别&…...

编程日记 2023/8/9 8:18:12

Python爬虫实战：研究MechanicalSoup库相关技术

一、MechanicalSoup 库概述 1.1 库简介 MechanicalSoup 是一个 Python 库，专为自动化交互网站而设计。它结合了 requests 的 HTTP 请求能力和 BeautifulSoup 的 HTML 解析能力，提供了直观的 API，让我们可以像人类用户一样浏览网页、填写表单和提交请求。 1.2 主要功能特点…...

编程新知 2025/10/10 18:13:55

在软件开发中正确使用MySQL日期时间类型的深度解析

在日常软件开发场景中，时间信息的存储是底层且核心的需求。从金融交易的精确记账时间、用户操作的行为日志，到供应链系统的物流节点时间戳，时间数据的准确性直接决定业务逻辑的可靠性。MySQL作为主流关系型数据库，其日期时间类型的…...

编程新知 2025/10/16 13:22:06

7.4.分块查找

一.分块查找的算法思想： 1.实例： 以上述图片的顺序表为例， 该顺序表的数据元素从整体来看是乱序的，但如果把这些数据元素分成一块一块的小区间， 第一个区间[0,1]索引上的数据元素都是小于等于10的， 第二…...

编程新知 2026/1/27 18:11:42

Maven 概述、安装、配置、仓库、私服详解

目录 1、Maven 概述 1.1 Maven 的定义 1.2 Maven 解决的问题 1.3 Maven 的核心特性与优势 2、Maven 安装 2.1 下载 Maven 2.2 安装配置 Maven 2.3 测试安装 2.4 修改 Maven 本地仓库的默认路径 3、Maven 配置 3.1 配置本地仓库 3.2 配置 JDK 3.3 IDEA 配置本地 Ma…...

编程新知 2026/2/8 1:58:01

Mobile ALOHA全身模仿学习

一、题目 Mobile ALOHA：通过低成本全身远程操作学习双手移动操作 传统模仿学习（Imitation Learning）缺点：聚焦与桌面操作，缺乏通用任务所需的移动性和灵活性 本论文优点：（1）在ALOHA…...

编程新知 2026/1/27 14:18:20

USB Over IP专用硬件的5个特点

USB over IP技术通过将USB协议数据封装在标准TCP/IP网络数据包中，从根本上改变了USB连接。这允许客户端通过局域网或广域网远程访问和控制物理连接到服务器的USB设备（如专用硬件设备），从而消除了直接物理连接的需要。USB over IP的…...

编程新知 2026/2/6 13:42:22

基于Springboot+Vue的办公管理系统

角色： 管理员、员工 技术： 后端: SpringBoot, Vue2, MySQL, Mybatis-Plus 前端: Vue2, Element-UI, Axios, Echarts, Vue-Router 核心功能： 该办公管理系统是一个综合性的企业内部管理平台，旨在提升企业运营效率和员工管理水…...

编程新知 2026/1/31 8:55:37

NPOI操作EXCEL文件 ——CAD C# 二次开发

缺点:dll.版本容易加载错误。CAD加载插件时，没有加载所有类库。插件运行过程中用到某个类库，会从CAD的安装目录找，找不到就报错了。 【方案2】让CAD在加载过程中把类库加载到内存 【方案3】是发现缺少了哪个库，就用插件程序加载进…...

编程新知 2026/1/26 13:35:42

给网站添加live2d看板娘

给网站添加live2d看板娘 参考文献： stevenjoezhang/live2d-widget: 把萌萌哒的看板娘抱回家 (ノ≧∇≦)ノ | Live2D widget for web platformEikanya/Live2d-model: Live2d model collectionzenghongtu/live2d-model-assets 前言 网站环境如下，文章也主…...

编程新知 2026/2/1 4:23:19

【Veristand】Veristand环境安装教程-Linux RT / Windows

首先声明，此教程是针对Simulink编译模型并导入Veristand中编写的，同时需要注意的是老用户编译可能用的是Veristand Model Framework，那个是历史版本，且NI不会再维护，新版本编译支持为VeriStand Model Generation Suppo…...

编程新知 2026/2/5 20:04:55