当前位置： 首页 > news >正文

企业级数据仓库-理论知识

news 2026/2/8 6:50:54

D3 AM

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

在这里插入图片描述
在这里插入图片描述

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

大数据中间件

  • Hive：将SQL转化成分布式Map/Reduce进行运算，也支持转换成Spark,需要单独安装Hive集群才能访问Spark,支持60%的SQL，延迟比较大。
  • SparkSQL:属于Spark生态圈，Hive on Sqark。
  • HBase: NoSQL,高并发读，适合表结构频繁变动。
  • Impala: MPP架构的数据查询引擎，低层兼容Hive、Spark SQL，快速交互查询服务。
  • HAWQ：是Hadoop上的移植产品，属于分布式批处理架构+MPP
  • TIDB: New SQL, MPP+SMP架构，底层No SQL存储
    在这里插入图片描述
    在这里插入图片描述

相关文章：

企业级数据仓库-理论知识

D3 AM 大数据中间件 Hive：将SQL转化成分布式Map/Reduce进行运算，也支持转换成Spark,需要单独安装Hive集群才能访问Spark,支持60%的SQL，延迟比较大。SparkSQL:属于Spark生态圈，Hive on Sqark。HBase: NoSQL,高并发读，适…...

编程日记 2023/9/20 2:41:22

解决flutter不识别yaml里面配置的git项目

解决办法找到相应的 git路径，然后手动 git pull 暂时先用这个笨方法，后面有更好的解决办法了再说 studio 自己拉取的项目里面没有ios 和lib包...

编程日记 2023/9/20 2:40:21

rust结构体

一、定义结构体类型 语法 struct Name_of_structure {field1: data_type,field2: data_type,field3: data_type, }注意： 不同于C，Rust的struct语句仅用来定义类型，不能定义实例。 结尾不需要;。 每个字段定义之后用 , 分隔。最后一个逗号可…...

编程日记 2023/9/20 2:37:18

Python - 小玩意 - 键盘记录器

pip install keyboardimport keyboard import timedef get_time():date_time time.strftime("%Y-%m-%d %H:%S", time.localtime())return date_timedef abc(x):if x.event_type down:print(f"{get_time()}你按下了{x.name}")with open(./键盘记录器.txt,…...

编程日记 2023/9/20 2:33:15

msvcp71.dll丢失的解决方法分享，全面分析msvcp71.dll丢失原因

msvcp71.dll 丢失的问题可能困扰着许多使用 Windows 操作系统的用户。msvcp71.dll 是微软 C运行时库中的一个动态链接库文件，负责提供一些基本的函数和类，例如字符串处理、数学运算、文件操作等。如果这个文件丢失或损坏了，那么在使用依赖于它…...

编程日记 2023/9/20 2:31:12

stm32----ADC模数转换

一、ADC介绍 ADC，即模数转换器，它可以将模拟信号转化为数字信号。在stm32种一般有3个ADC，每个ADC有18个通道。 12位ADC是一种逐次逼近型模拟数字转换器，它有多达18个通道，可测量16个外部和两个内部信号源。各个通道的A…...

编程日记 2023/9/20 2:28:09

Unity SteamVR 开发教程：用摇杆/触摸板控制人物持续移动（2.x 以上版本）

文章目录 📕教程说明📕场景搭建📕创建移动的动作📕移动脚本⭐移动⭐实时调整 CharacterController 的高度 📕取消手部和 CharacterController 的碰撞 持续移动是 VR 开发中的一个常用功能。一般是用户推动手柄摇杆&…...

编程日记 2023/9/20 2:26:08

04条件构造器和常用接口

条件构造器和常用接口 wapper介绍 条件构造器的两个条件之间默认就是AND并列关系,如果需要或者的关系则需要调用构造器的or()方法 条件构造器类型作用Wrapper条件构造抽象类,最顶端父类AbstractWrapper生成SQL的where条件QueryWrapper封装查询或删除的条件UpdateWrapper封装修…...

编程日记 2023/9/20 2:25:06

什么是HTTP状态码？常见的HTTP状态码有哪些？

聚沙成塔每天进步一点点 ⭐ 专栏简介⭐ 什么是HTTP状态码？⭐ 1xx - 信息性状态码⭐ 2xx - 成功状态码⭐ 3xx - 重定向状态码⭐ 4xx - 客户端错误状态码⭐ 5xx - 服务器错误状态码⭐ 写在最后 ⭐ 专栏简介 前端入门之旅：探索Web开发的奇妙世界 欢迎来到前…...

编程日记 2023/9/20 2:21:03

vue3的双向绑定原理分析

谈到vue3的双向绑定原理，就得先知道，为什么vue2的双向绑定方式会被废弃？ vue2的双向绑定 Object.defineProperty Object.defineProperty() 方法会直接在一个对象上定义一个新属性，或者修改一个对象的现有属性，并返回…...

编程日记 2023/9/20 2:20:02

MySQL数据库时间计算的用法

今天给大家分享如何通过MySQL内置函数实现时间的转换和计算，在工作当中，测试人员经常需要查询数据库表的日期时间，但发现开发人员存入数据库表的形式都是时间戳形式，不利于测试人员查看，测试人员只能利用工具对时间戳进…...

编程日记 2023/9/20 2:19:02

应用在儿童平板防蓝光中的LED防蓝光灯珠

现在电子产品多，手机、平板电脑、电子书等等，由于蓝光有害眼睛健康，于是市场上有很多防蓝光的眼镜、防蓝光的手机膜、防蓝光的平板，这些材料和设备到底有没有用？如何正确预防蓝光危害呢？ 我们现在所用的灯…...

编程日记 2023/9/20 2:16:59

BERT 快速理解——思路简单描述

定义： BERT（Bidirectional Encoder Representations from Transformers）是一种预训练的语言模型，它基于Transformer架构，通过在大规模的未标记文本上进行训练来学习通用的语言表示。 输入 在BERT中，输入…...

编程日记 2023/9/20 2:15:58

二叉树实现的相关函数

1.二叉树的创建 BTNode* BinaryTreeCreate(BTDataType* a, int n, int* pi) { if (n0||a[*pi] #){ (*pi);return NULL;}BTNode* root (BTNode*)malloc(sizeof(BTNode));root->_data a[(*pi)];root->_left BinaryTreeCreate(a, --n, pi);root->_right Binary…...

编程日记 2023/9/20 2:11:55

Redis面试题(二)

文章目录 前言一、Redis 支持的 Java 客户端都有哪些？官方推荐用哪个？二、Redis 和 Redisson 有什么关系？三、Jedis 与 Redisson 对比有什么优缺点？四、说说 Redis 哈希槽的概念？五、Redis 集群的主从复制模型是怎样的…...

编程日记 2023/9/20 2:10:54

STP介绍

目录 STP概述 二层环路带来的问题 1.广播风暴 2.MAC地址漂移问题 3.多帧复制---这个好理解，同一个数据帧被重复收到多次，被称为多帧复制。 802.1D生成树 STP的BPDU BPDU主要分为两大类 配置BPDU RPC COST 配置BPDU的工作过程 TCN BPDU TCN…...

编程日记 2023/9/20 2:07:52

numpy 和 tensorflow 中的各种乘法（点乘和矩阵乘）

嗨喽，大家好呀~这里是爱看美女的茜茜呐 👇 👇 👇 更多精彩机密、教程，尽在下方，赶紧点击了解吧~ python源码、视频教程、插件安装教程、资料我都准备好了，直接在文末名片自取就可 点乘和矩阵乘…...

编程日记 2023/9/20 2:05:50

(图论) 1020. 飞地的数量 ——【Leetcode每日一题】

❓ 1020. 飞地的数量 难度：中等 给你一个大小为 m x n 的二进制矩阵 grid ，其中 0 表示一个 海洋单元格、1 表示一个 陆地单元格。 一次 移动 是指从一个陆地单元格走到另一个相邻（上、下、左、右）的陆地单元格或跨过 grid 的边…...

编程日记 2023/9/20 2:01:46

c++ 重载、重写、覆盖

重载：指在同一作用域内，有多个同名但参数不同的函数的现象，叫重载；可以是任何用户定义的函数，例如 类成员函数、类静态函数、普通函数重写：子类重写父类的同名函数，只要子类出现有父类的同名函数…...

编程日记 2023/9/20 2:00:45

Python异步编程高并发执行爬虫采集，用回调函数解析响应

一、问题：当发送API请求，读写数据库任务较重时，程序运行效率急剧下降。 异步技术是Python编程中对提升性能非常重要的一项技术。在实际应用，经常面临对外发送网络请求，调用外部接口，或者不断更新数据库或文…...

编程日记 2023/9/20 1:58:43

19c补丁后oracle属主变化，导致不能识别磁盘组

补丁后服务器重启，数据库再次无法启动 ORA01017: invalid username/password; logon denied Oracle 19c 在打上 19.23 或以上补丁版本后，存在与用户组权限相关的问题。具体表现为，Oracle 实例的运行用户（oracle）和集…...

编程新知 2026/2/8 4:37:10

TDengine 快速体验（Docker 镜像方式）

简介 TDengine 可以通过安装包、Docker 镜像 及云服务快速体验 TDengine 的功能，本节首先介绍如何通过 Docker 快速体验 TDengine，然后介绍如何在 Docker 环境下体验 TDengine 的写入和查询功能。如果你不熟悉 Docker，请使用 安装包的方式快…...

编程新知 2026/2/3 7:43:45

应用升级/灾备测试时使用guarantee 闪回点迅速回退

1.场景 应用要升级,当升级失败时,数据库回退到升级前. 要测试系统,测试完成后,数据库要回退到测试前。 相对于RMAN恢复需要很长时间， 数据库闪回只需要几分钟。 2.技术实现 数据库设置 2个db_recovery参数 创建guarantee闪回点，不需要开启数据库闪回。…...

编程新知 2026/1/14 22:12:47

Day131 | 灵神 | 回溯算法 | 子集型 子集

Day131 | 灵神 | 回溯算法 | 子集型 子集 78.子集 78. 子集 - 力扣（LeetCode） 思路： 笔者写过很多次这道题了，不想写题解了，大家看灵神讲解吧 回溯算法套路①子集型回溯【基础算法精讲 14】_哔哩哔哩_bilibili 完…...

编程新知 2026/1/23 12:37:51

学习STC51单片机31（芯片为STC89C52RCRC）OLED显示屏1

每日一言 生活的美好，总是藏在那些你咬牙坚持的日子里。 硬件：OLED 以后要用到OLED的时候找到这个文件 OLED的设备地址 SSD1306"SSD" 是品牌缩写，"1306" 是产品编号。 驱动 OLED 屏幕的 IIC 总线数据传输格式 示意图 …...

编程新知 2026/1/30 4:16:26

论文解读：交大港大上海AI Lab开源论文 | 宇树机器人多姿态起立控制强化学习框架（一）

宇树机器人多姿态起立控制强化学习框架论文解析 论文解读：交大&港大&上海AI Lab开源论文 | 宇树机器人多姿态起立控制强化学习框架（一） 论文解读：交大&港大&上海AI Lab开源论文 | 宇树机器人多姿态起立控制强化…...

编程新知 2025/8/27 0:58:09

鸿蒙中用HarmonyOS SDK应用服务 HarmonyOS5开发一个生活电费的缴纳和查询小程序

一、项目初始化与配置 1. 创建项目 ohpm init harmony/utility-payment-app 2. 配置权限 // module.json5 {"requestPermissions": [{"name": "ohos.permission.INTERNET"},{"name": "ohos.permission.GET_NETWORK_INFO"…...

编程新知 2025/11/26 13:15:57

AI书签管理工具开发全记录（十九）：嵌入资源处理

1.前言 📝 在上一篇文章中，我们完成了书签的导入导出功能。本篇文章我们研究如何处理嵌入资源，方便后续将资源打包到一个可执行文件中。 2.embed介绍 🎯 Go 1.16 引入了革命性的 embed 包，彻底改变了静态资源管理的…...

编程新知 2026/1/30 16:24:23

算法岗面试经验分享-大模型篇

文章目录 A 基础语言模型A.1 TransformerA.2 Bert B 大语言模型结构B.1 GPTB.2 LLamaB.3 ChatGLMB.4 Qwen C 大语言模型微调C.1 Fine-tuningC.2 Adapter-tuningC.3 Prefix-tuningC.4 P-tuningC.5 LoRA A 基础语言模型 A.1 Transformer （1）资源 论文&a…...

编程新知 2026/1/23 11:58:06

DingDing机器人群消息推送

文章目录 1 新建机器人2 API文档说明3 代码编写 1 新建机器人 点击群设置 下滑到群管理的机器人，点击进入 添加机器人 选择自定义Webhook服务 点击添加 设置安全设置，详见说明文档 成功后，记录Webhook 2 API文档说明 点击设置说明 查看自…...

编程新知 2026/1/30 4:18:53