大数据项目软硬件选择

目录一.技术选型二.系统数据流程设计三.框架版本选型如何选择Apache/CDH/HDP版本...

编程日记 2023/5/30 6:46:55

redis数据结构的适用场景分析

1、String 类型的内存空间消耗问题，以及选择节省内存开销的数据类型的解决方案。为什么 String 类型内存开销大？ 图片 ID 和图片存储对象 ID 都是 10 位数，我们可以用两个 8 字节的 Long 类型表示这两个 ID。因为 8 字节的 Long 类型最大可以…...

编程日记 2023/5/30 2:29:46

同步、异步、全双工、半双工的区别

1、通讯 1.1 并行通讯定义：一条信息的各位数据被同时传送的通讯方式称为并行通讯； 特点： 各个数据位同时发送，传送速度快、效率高，但有多少数据位就需要多少根数据线，因此传送成本高，并且只…...

编程日记 2023/5/30 2:29:44

ClickHouse 与 Amazon S3 结合？一起来探索其中奥秘

目录ClickHouse 简介ClickHouse 与对象存储ClickHouse 与 S3 结合的三种方法示例参考架构小结参考资料ClickHouse 简介ClickHouse 是一种快速的、开源的、用于联机分析（OLAP）的列式数据库管理系统（DBMS），由俄罗斯的Yan…...

编程日记 2023/5/30 2:29:42

【Spark分布式内存计算框架——Structured Streaming】1. Structured Streaming 概述

前言 Apache Spark在2016年的时候启动了Structured Streaming项目，一个基于Spark SQL的全新流计算引擎Structured Streaming，让用户像编写批处理程序一样简单地编写高性能的流处理程序。 Structured Streaming并不是对Spark Streaming的简单改进&#xf…...

编程日记 2023/5/30 2:29:40

问题： PKIX path building failed: sun.security.provider.certpath.SunCertPathBuilderException: unable to find valid certification path to requested target 无法找到请求目标的有效证书路径一、Windows—java证书导入 1、下载证书到本地（以下…...

编程日记 2023/5/30 2:29:34

【Linux学习】菜鸟入门——gcc与g++简要使用

一、gcc/g gcc/g是编译器，gcc是GCC(GUN Compiler Collection，GUN编译器集合)中的C编译器；g是GCC中的C编译器。使用g编译文件时会自动链接STL标准库，而gcc不会自动链接STL标准库。下面简单介绍一下Linux环境下（Windows差…...

编程日记 2023/5/30 2:29:32

Cadence Allegro 导出Bill of Material Report详解

⏪《上一篇》 🏡《总目录》 ⏩《下一篇》目录 1，概述2，Assigned Functions Report作用3，Assigned Functions Report示例4，Assigned Functions Report导出方法4.1，方法14.2，方法2B站关注“硬小二”浏览更多演示视频...

编程日记 2023/5/30 2:29:30

localStorage线上问题的思考

一、背景： localStorage作为HTML5 Web Storage的API之一，使用标准的键值对（Key-Value,简称KV）数据类型主要作用是本地存储。本地存储是指将数据按照键值对的方式保存在客户端计算机中，直到用户或者脚本主动清除数据&a…...

编程日记 2023/5/30 15:33:06

什么是DNS域名解析

什么是DNS域名解析？因特网上作为域名和IP地址相互映射的一个分布式数据库，能够使用户更方便的访问互联网，而不用去记住能够被机器直接读取的IP数串。通过主机名，得到该主机名对应的IP地址的过程叫做域名解析。正向解析&#xff1a…...

编程日记 2023/5/30 15:33:03

Cadence Allegro 导出Assigned Functions Report详解

⏪《上一篇》 🏡《总目录》 ⏩《下一篇》目录 1，概述2，Assigned Functions Report作用3，Assigned Functions Report示例4，Assigned Functions Report导出方法4.1，方法14.2，方法2B站关注“硬小二”浏览更多演示视频...

编程日记 2023/5/30 6:46:52

Python中Opencv和PIL.Image读取图片的差异对比

近日，在进行深度学习进行推理的时候，发现不管怎么样都得不出正确的结果，再仔细和正确的代码进行对比了后发现原来是Python中不同的库读取的图片数组是有差异的。 image np.array(Image.open(image_file).convert(RGB)) image cv2.imread(…...

编程日记 2023/5/30 2:29:28

win10 WSL2 使用Ubuntu配置与安装教程

Win10 22H2ubuntu 22.04ROS2 文章目录一、什么是WSL2二、Win10 系统配置2.1 更新Windows版本2.2 Win10系统启用两个功能2.3 Win10开启BIOS/CPU开启虚拟化(VT)（很关键）2.4 下载并安装wsl_update_x64.msi2.5 PowerShell安装组件三、PowerShell安装Ubuntu3.…...

编程日记 2023/5/30 15:33:01

LeetCode每日一题(28. Find the Index of the First Occurrence in a String)

Given two strings needle and haystack, return the index of the first occurrence of needle in haystack, or -1 if needle is not part of haystack. Example 1: Input: haystack “sadbutsad”, needle “sad” Output: 0 Explanation: “sad” occurs at index 0 and…...

编程日记 2023/5/30 2:29:26

Android 圆弧形 SeekBar

效果预览package com.gcssloop.widget;import android.annotation.SuppressLint;import android.content.Context;import android.content.res.TypedArray;import android.graphics.Canvas;import android.graphics.Color;import android.graphics.Matrix;import android.graph…...

编程日记 2023/5/30 15:32:59

java 字典

java 字典数据结构总览 Map Map 描述的是一种映射关系，一个 key 对应一个 value，可以添加，删除，修改和获取 key/value，util 提供了多种 Map HashMap: hash 表实现的 map，插入删除查找性能都是 O(1)&…...

编程日记 2023/5/30 15:32:57

【企业服务器LNMP环境搭建】mysql安装

MySQL安装步骤： 1、相关说明 1.1、编译参数的说明 -DCMAKE_INSTALL_PREFIX安装到的软件目录-DMYSQL_DATADIR数据文件存储的路径-DSYSCONFDIR配置文件路径 (my.cnf)-DENABLED_LOCAL_INFILE1使用localmysql客户端的配置-DWITH_PARTITION_STORAGE_ENGINE使mysql支持…...

编程日记 2023/5/30 15:32:56

vue自定义指令以及angular自定义指令（以禁止输入空格为例）

哈喽，小伙伴们，大家好啊，最近要实现一个vue自定义指令，就是让input输入框禁止输入空格建立一个directives的指令文件，里面专门用来建立各个指令的官方文档：自定义指令 | Vue.js (vuejs.org)我们都知道vue中…...

编程日记 2023/5/30 15:32:54

异常复习

异常复习异常(广义)：泛指程序中一切不正常的情况错误：例如内存不够用,程序是无法解决的异常(狭义)：程序在运行中出现问题,但是可以通过异常处理机制处理,程序可以继续向后执行异常体系 Throwable类有两个直接子类：Excepti…...

编程日记 2023/5/30 15:32:52

K8s:开源安全平台 kubescape 实现 Pod 的安全合规检查/镜像漏洞扫描

写在前面生产环境中的 k8s 集群安全不可忽略，即使是内网环境容器化的应用部署虽然本质上没有变化，始终是机器上的一个进程但是提高了安全问题的处理的复杂性分享一个开源的 k8s 集群安全合规检查/漏洞扫描工具 kubescape博文内容涉及： kube…...

编程日记 2023/5/30 15:32:43

C#中，FTP同步或异步读取大量文件

一次快速读取上万个文件中的内容在C#中，可以使用FTP客户端类（如FtpWebRequest）来连接FTP服务器并进行文件操作。一次快速读取上万个文件中的内容，可以采用多线程的方式并发读取文件。以下是一个示例代码，用于读取FT…...

编程日记 2023/5/29 12:29:24

STM32单片机的FLASH和RAM

STM32内置有Flash和RAM（而RAM分为SRAM和DRAM，STM32内为SRAM），硬件上他们是不同的设备存储器、属于两个器件，但这两个存储器的寄存器输入输出端口被组织在同一个虚拟线性地址空间内。 MDK预处理、编译、汇编、链接后编…...

编程日记 2023/5/30 15:32:41

Java 二叉树的遍历

二叉树的遍历（traversing binary tree）是指从根结点出发，按照某种次序依次访问二叉树中所有的结点，使得每个结点被访问依次且仅被访问一次。前序遍历（根左右）先访问根结点，然后前序遍历左子树…...

编程日记 2023/5/30 15:32:39

实习日记-C#

数据类型字符串常量 string a "hello, world"; // hello, world string b "hello, world"; // hello, world string c "hello \t world"; // hello world string d "hello \t wor…...

编程日记 2023/3/4 10:35:58

Tech Lead如何引导团队成员解决问题？

作为一个开发团队的Tech Lead，当团队成员向你寻求帮助时，你有没有说过下面这些话？ 你别管了，我来解决这个问题你只要。。。就行了你先做其他的吧，我研究一下，然后告诉你怎么做当我们说这些话时&#xff…...

编程日记 2023/3/4 10:34:50

07--组件

一、小程序组件分类微信团队为开发者提供了一系列基础组件，开发者可以通过组合这些基础组件进行快速开发。小程序中的组件也是非常丰富的，开发者可以基于组件快速搭建出漂亮的页面结构。小程序中的组件其实相当于网页中的HTML标签，只不过标签…...

编程日记 2023/3/4 10:33:41

怎么做好一个完整的项目复盘

复盘，是运营必不可少的能力，小到一次买菜的经历，大到百亿千亿的投资项目，都可以通过复盘来总结规律、提升水平。简单说来，复盘可以达到的效果有两条：优化弱项，强化强项明确自己的价值&#xff0…...

编程日记 2023/5/30 23:32:51

浅谈一下mysql8.0与5.7的字符集

修改字符集修改步骤在MySQL8.0版本之前，默认字符集为1atin1,utf8字符集指向的是utf8mb3。网站开发人员在数据库设计的时候往往会将编码修改为ut8字符集。如果遗忘修改默认的编码，就会出现乱码的问题。从MySQL8.0开始，数据库的默认编码将改…...

编程日记 2023/5/30 23:32:47

paddle推理部署（cpu)

我没按照官方文档去做，吐槽一下，官方文档有点混乱。。一、概述总结起来，就是用c示例代码，用一个模型做推理。二、示例代码下载https://www.paddlepaddle.org.cn/paddle/paddleinferencehttps://github.com/PaddlePaddle/Paddle-In…...

编程日记 2023/5/30 23:32:44