当前位置： 首页 > news >正文

中电金信Gien享汇・大数据专题｜金融行业数据架构及模型演进

news 文章来源：https://blog.csdn.net/zhongdianjinxin/article/details/129393461 2025/1/11 5:08:58

本期嘉宾

陈子刚

中电金信商业分析事业部华南区总经理

毕业于复旦大学，硕士研究生；拥有16年以上金融行业商业智能领域从业经验；曾就职于中国工商银行、Teradata、东亚银行，服务于平安银行、广发银行、招商银行、广东农信、招商永隆银行等华南金融机构。

1、湖仓一体架构建设趋势

要点：金融业数据平台发展至今，呈现出国产化趋势，湖仓一体、实时数仓是业内推崇的热点，以全面风险管理和大财管为主要应用。

  • 数据仓库理论的形成、数据仓库建设的分歧、ODS&EDW&DataMart的比较

  • 金融业数据平台演进历程

  • 数据平台建设的三种类型：数据仓库位于数据湖前端、数据仓库位于数据湖外、湖仓一体化

2.模型设计理念的变迁

要点：降范式模型设计有着严格的准入原则和业务场景设计原则。业务场景设计不落主表，部分信息不打散，部分信息拆成多个，适当冗余。通过数据湖+DWD+DWS，牺牲部分模型稳定性，提升整体数据加载和访问效率，共同为下游应用服务。

  1. 关系数据库建模以及1NF/2NF/3NF

  2. 星型模型以及雪花模型特点

  3. 金融行业数据模型：FS-LDM 、IBM FSDM

  4. 金融行业模型设计理念的转变

相关文章：

中电金信Gien享汇・大数据专题｜金融行业数据架构及模型演进

本期嘉宾 陈子刚 中电金信商业分析事业部华南区总经理 毕业于复旦大学，硕士研究生；拥有16年以上金融行业商业智能领域从业经验；曾就职于中国工商银行、Teradata、东亚银行，服务于平安银行、广发银行、招商银行、广东农信、招商…...

编程日记 2023/4/29 22:52:29

Cadence Allegro 导出Design Cross Section报告详解

⏪《上一篇》   🏡《上级目录》   ⏩《下一篇》 目录 1，概述2，Design Cross Section作用3，Design Cross Section示例4，Component Report导出方法4.1，方法14.2，方法2B站关注“硬小二”浏览更多演示视频 1，概述 <...

编程日记 2023/4/29 22:52:27

【LeetCode】剑指 Offer 23. 链表中环的入口节点 p139 -- Java Version

题目链接&#xff1a;https://leetcode.cn/problems/c32eOV/ 1. 题目介绍&#xff08;23. 链表中环的入口节点&#xff09; 给定一个链表&#xff0c;返回链表开始入环的第一个节点。 从链表的头节点开始沿着 next 指针进入环的第一个节点为环的入口节点。如果链表无环&#x…...

编程日记 2023/4/29 22:52:24

LeetCode-96. 不同的二叉搜索树

题目来源 96. 不同的二叉搜索树 递归 1.我们要知道二叉搜索树的性质&#xff0c;对于一个二叉搜索树&#xff0c;其 【左边的节点值 < 中间的节点值 < 右边的节点值】&#xff0c;也就是说&#xff0c;对于一个二叉搜索树&#xff0c;其中序遍历之后形成的数组应该是一…...

编程日记 2023/4/29 22:52:22

JavaWeb基础

Servlet 是在服务器上运行的小程序。这个词是在 Java applet的环境中创造的&#xff0c;Java applet 是一种当作单独文件跟网页一起发送的小程序&#xff0c;它通常用于在客户端运行&#xff0c;结果得到为用户进行运算或者根据用户互作用定位图形等服务。服务器上需要一些程序…...

编程日记 2023/4/29 22:52:20

C++基础了解-03-C++变量类型

C变量类型 一、变量类型 变量其实只不过是程序可操作的存储区的名称。C 中每个变量都有指定的类型&#xff0c;类型决定了变量存储的大小和布局&#xff0c;该范围内的值都可以存储在内存中&#xff0c;运算符可应用于变量上。 变量的名称可以由字母、数字和下划线字符组成。…...

编程日记 2023/4/29 22:52:18

树莓派4b——通过mjpg-streamer使用摄像头

参考博文&#xff1a;(51条消息) 树莓派4b如何打开摄像头_树莓派打开摄像头_会飞的小东的博客-CSDN博客(51条消息) 树莓派4B &#xff08;系统版本11&#xff0c;bullseye&#xff09;更换清华源_树莓派更换清华源_ASSSSHION的博客-CSDN博客这个坑踩了我一星期&#xff0c;找各…...

编程日记 2023/4/29 22:52:16

MySQL运维篇之读写分离

04、读写分离 4.1、介绍 读写分离&#xff0c;简单地说是把对数据库的读和写操作分开&#xff0c;以对应不同的数据库服务器。主数据库提供写操作&#xff0c;从数据库提供读操作&#xff0c;这样能有效地减轻单台数据库的压力。 通过Mycat即可轻易实现上述功能&#xff0c;…...

编程日记 2023/4/29 22:52:14

windows程序最小化到托盘并显示提示信息

windows程序最小化到托盘并显示提示信息背景干货直接上代码解析控制窗口显示初始化托盘添加第一条消息更新界面结束啦背景 有些时候需要程序在最小化的时候可以看到程序进度&#xff0c;甚至需要完全关闭界面&#xff0c;只留下托盘显示&#xff0c;这篇文章就是在这个背景下诞…...

编程日记 2023/4/29 22:52:11

使字符串平衡的最少删除次数（简单动态规划）

给你一个字符串 s &#xff0c;它仅包含字符 a 和 b​​​​ 。 你可以删除 s 中任意数目的字符&#xff0c;使得 s 平衡 。当不存在下标对 (i,j) 满足 i < j &#xff0c;且 s[i] b 的同时 s[j] a&#xff0c;此时认为 s 是 平衡 的。 请你返回使 s 平衡 的 最少 删除次…...

编程日记 2023/4/29 22:52:10

linux网络广播使用

广播使用的特殊的IP地址： 最后一位是255时的IP地址是给广播预留的IP地址， 如：192.168.1.255 UDP服务器在广播数据时,数据报使用的地址不是UDP服务器地址,而是广播地址 如:UDP服务器地址是:192.168.1.110 UDP服务器广播数据时使用地址是:192.168.1.255 UDP数据包发送给交换机…...

编程日记 2023/4/29 22:52:08

Kubernetes源码学习

kubernetes源码剖析 1.下载和编译源码 go 1.18.3 kubernetes 1.24.2 centos 7.9 进入目录$GOPATH/src/k8s.io/kubernetes&#xff0c;执行以下命令即可全量构建&#xff0c;并且构建结果只包含linux平台的&#xff1a; KUBE_BUILD_PLATFORMSlinux/amd64 make all GOFLAGS…...

编程日记 2023/4/28 1:02:51

筑基九层 —— 指针详解

目录 前言&#xff1a; 指针详解 前言&#xff1a; 1.CSDN由于我的排版不怎么好看&#xff0c;我的有道云笔记比较美观&#xff0c;请移步有道云笔记 2.修炼必备 1&#xff09;入门必备&#xff1a;VS2019社区版&#xff0c;下载地址&#xff1a;Visual Studio 较旧的下载 -…...

编程日记 2023/4/29 22:52:05

内存清理、动画制作、CPU检测等五款实用软件推荐

人类与99%的动物之间最大差别在于是否会运用工具&#xff0c;借助好的工具&#xff0c;能提升几倍的工作效率。 1.内存清理软件——MemReduct MemReduct是一款内存清理软件&#xff0c;现在越来越多的软件由于硬件的普遍发展&#xff0c;对内存的使用都开始肆无忌惮起来&…...

编程日记 2023/4/29 22:52:03

RocketMQ 5.0 学习笔记

1. 需求 背景&#xff1a;业务需要&#xff0c;平台将使用rocketMQ来实现消息的发送与消费&#xff0c;替代redis的消息功能。 需要在搭建好rocketMQ平台后&#xff0c;进行研究和验证。 技术&#xff1a;Springboot RocketMQ5.0 使用场景&#xff1a;签到活动&#xff0c…...

编程日记 2023/4/29 22:52:00

796.子矩阵的和

输入一个 n行 m列的整数矩阵&#xff0c;再输入 q个询问&#xff0c;每个询问包含四个整数 x1,y1,x2,y2&#xff0c;表示一个子矩阵的左上角坐标和右下角坐标。 对于每个询问输出子矩阵中所有数的和。 输入格式 第一行包含三个整数 n&#xff0c;m&#xff0c;q。 接下来 n…...

编程日记 2023/4/29 22:51:58

【PySide6】信号(signal)和槽函数(slot)，以及事件过滤器

说明 在PYQT中&#xff0c;父控件可以通过两种方式响应子控件的事件&#xff1a; 通过信号(signal)和槽函数(slot)机制连接子控件和父控件父控件可以通过设置eventFilter()方法来监听响应子控件的事件 一、信号(signal)和槽函数(slot) 示例 在PYQT中&#xff0c;每个组件都…...

编程日记 2023/4/29 22:51:55

canal admin管理端配置（二）

下载安装 下载地址&#xff1a; 下载解压即可 配置 修改canal.admin-1.1.5\conf\application.yml server:port: 8089 #端口根据是否冲突修改 spring:jackson:date-format: yyyy-MM-dd HH:mm:sstime-zone: GMT8spring.datasource:address: 192.0.16.12:3306#数据库ip和端口…...

编程日记 2023/4/29 22:51:53

Servlet 生命周期

Servlet的生命周期有四个阶段&#xff1a;加载并实例化、初始化、请求处理、销毁。主要涉及到的方法有init、service、doGet、doPost、destory等 加载并实例化 Servlet容器负责加载和实例化Servelt。当Servlet容器启动时&#xff0c;或者在容器检测到需要这个Servlet来响应第一…...

编程日记 2023/4/29 22:51:50

redis集群模式登陆

总结redis单机模式时&#xff0c;登陆redis的命令格式&#xff1a; ./redis-cli -h 地址 -p 端口redis集群模式时&#xff0c;登陆redis的命令格式&#xff1a; ./redis-cli -h 地址 -p 端口 -c举例1&#xff1a;redis单机模式下登陆rootubuntu:/usr/local/redis/redis-7.0.0/b…...

编程日记 2023/4/29 22:51:42

04-useMemo 、React.memo、useCallback

useMemo 、React.memo、useCallback 一、useMemo 基本用法 缓存数据&#xff0c;模拟 Vue 中的计算属性。 同样useMemo跟vue中component一样&#xff0c;也是有缓存的&#xff0c;会将结果缓存下来 import React, { useMemo, useState } from react;export default functio…...

编程日记 2023/4/29 22:51:38

windows下安装emqx Unable to load emulator DLL@if ===/ SET data_dir=“

1.报错内容 I:\0-software\02-emqx\emqx-5.0.19-windows-amd64\bin>emqx start Unable to load emulator DLL (I:\0-software\02-emqx\emqx-5.0.19-windows-amd64\erts-12.3.2.9\bin\beam.smp.dll) 此时不应有 SET。 I:\0-software\02-emqx\emqx-5.0.19-windows-amd64\bin&…...

编程日记 2023/4/29 22:51:33

Redis常见问题（未完待续）

Redis常见问题Redis为什么快 &#xff1f;Redis为什么快 &#xff1f; 根据官方数据&#xff0c;Redis 的 QPS 可以达到约 100000&#xff08;每秒请求数&#xff09;&#xff1b; 基于内存 对于磁盘数据库来说&#xff0c;首先要将数据通过 IO 操作读取到内存里再读取&#x…...

编程日记 2023/4/29 22:51:29

2024秋招BAT核心算法 | 详解图论

图论入门与最短路径算法 图的基本概念 由节点和边组成的集合 图的一些概念&#xff1a; ①有向边&#xff08;有向图&#xff09;&#xff0c;无向边&#xff08;无向图&#xff09;&#xff0c;权值 ②节点&#xff08;度&#xff09;&#xff0c;对应无向图&#xff0c;…...

编程日记 2023/4/29 22:51:23

凝聚共识，锚定未来 | 第四届OpenI/O 启智开发者大会NLP大模型论坛成功举办！

2023年2月24日下午&#xff0c;第四届OpenI/O启智开发者大会NLP大模型分论坛在深圳人才研修院隆重举办。该论坛以“开源集智创新探索中文NLP大模型生态发展”为主题&#xff0c;众多业内人士和研发者在此共享NLP领域的前沿动态和研发经验&#xff0c;畅想中国NLP领域的发展前景…...

编程日记 2023/4/29 22:51:16

99.【Git】

Git(一)、什么是版本控制1.什么是版本控制2、常见的版本控制工具(二)、版本控制分类1、本地版本控制2、集中版本控制 SVN3、分布式版本控制 Git(三)、Git与SVN的主要区别1、Git历史(四)、Git下载与环境配置1.git下载2、启动Git(五)、常用的Linux命令1.Linux常用命令(六)、Git必…...

编程日记 2023/4/29 22:51:08

Linux驱动交叉编译把驱动文件放入开发板，以及printk函数打印级别

上一篇介绍了一个最简单的驱动程序和驱动程序大体结构&#xff0c;但那还是用本地编译只能在Ubuntu上运行&#xff0c;我们该怎么编译一个能加载到开发板上呢&#xff0c;就需要交叉编译&#xff0c;交叉编译通常都是在嵌入式开发中使用到的。 交叉编译 理解交叉编译前先了解…...

编程日记 2023/4/29 22:51:01

力扣（LeetCode）433. 最小基因变化（2023.03.07）

基因序列可以表示为一条由 8 个字符组成的字符串&#xff0c;其中每个字符都是 ‘A’、‘C’、‘G’ 和 ‘T’ 之一。 假设我们需要调查从基因序列 start 变为 end 所发生的基因变化。一次基因变化就意味着这个基因序列中的一个字符发生了变化。 例如&#xff0c;“AACCGGTT”…...

编程日记 2023/4/29 22:50:50

网络基础（2）

目录1. 端口号2. 套接字socket3. 网络通信3.1 sockaddr与sockaddr_in3.2 接口服务端3.2.1 创建套接字&#xff0c;打开网络文件3.2.2 给该服务器绑定端口和ip&#xff08;特殊处理&#xff09;3.2.3 初始化相关服务器3.2.4 提供服务客户端3.2.5 绑定3.2.6 使用服务4. makefile实…...

编程日记 2023/4/29 22:50:47

掌握Spring Cloud Gateway：构建高性能API网关的原理和实践

Spring Cloud Gateway 是一个基于 Spring Boot 的 API 网关&#xff0c;用于构建微服务架构中的网关服务。它提供了统一的路由、请求转发、过滤器、负载均衡、熔断等功能&#xff0c;帮助开发者更好地管理和控制微服务系统的请求流量。 本文将介绍 Spring Cloud Gateway 的原理…...

编程日记 2023/4/29 22:50:39

网页版梦幻西游官网/武汉网站seo德升

功能单元的最大扇入扇出工具分析文档名称&#xff1a;功能单元最大扇入扇出工具分析作 者:日 期&#xff1a;1. 概念由于度量的目标是C源代码&#xff0c;所以“功能单元的最大扇入扇出”的含义如下&#xff1a;功能单元&#xff1a;c语言的函数。扇入&#xff1a;有多少其他函…...

编程日记 2025/1/10 23:30:34

哪个网站做推销产品/产品推广的渠道有哪些

实际上有两种方式去解决这种 问题&#xff0c; 一个是之前所提到的多进程和多线程的问题&#xff0c;第二种方式 就是本次要将的异步IO 它的原理就是当代码需要执行一个耗时的IO操作的时候&#xff0c;它只发出IO指令&#xff0c;并不等待IO结果&#xff0c;然后 去执行其他代…...

编程日记 2025/1/10 21:49:18

丹东网站推广/扬州seo优化

6月19日&#xff0c;计算机科学与技术学院安弈棋社通过线上比赛的形式举办了海报设计大赛。此次活动由社团负责人郭然主持举办&#xff0c;社团骨干成员以及在到梦空间报名的所有同学参加。活动伊始&#xff0c;同学们首先进入此次活动的QQ群&#xff0c;安弈棋社的活动负责人在…...

编程日记 2025/1/10 20:36:24

网站作风建设年专栏/千锋教育出来好找工作吗

纠结两天&#xff08;浏览器中唤起本地APP&#xff09;&#xff0c;一直找不到解决方案&#xff0c;今天总算基本搞定。 ps&#xff1a;吐槽一下 魔窗那篇文章&#xff0c;为什么就不直接把js代码开源开源&#xff0c;混淆后的代码看得我好恼火 参考文章&#xff1a;魔窗解决方…...

编程日记 2025/1/10 19:58:44

济南建设主管部门网站/宁波网站快速优化

近日&#xff0c;IBM宣布筹建中的认知计算系统研究中心&#xff08;C3SR&#xff09;将安家于美国伊利诺伊大学厄巴纳分校的工程学院。 C3SR计划在今年夏季正式启动&#xff0c;将构建以IBM Watson技术为基础的综合认知计算系统&#xff0c;对包括视频、讲稿、作业和教材等大量…...

编程日记 2025/1/10 18:37:08

教育机构网站建设方案/免费推广产品的网站

今天想要在Linux下查看机器上MCH(北桥)芯片&#xff0c;ICH(南桥)信息&#xff0c;在网上找方法。通过命令lspci | grep -i host\ bridge查看北桥芯片只今天想要在Linux下查看机器上MCH(北桥)芯片&#xff0c;ICH(南桥)信息&#xff0c;在网上找方法。通过命令lspci | grep -i …...

编程日记 2025/1/10 17:55:49