【大数据学习 | kafka高级部分】kafka的kraft集群
首先我们分析一下zookeeper在kafka中的作用
zookeeper可以实现controller的选举，并且记录topic和partition的元数据信息，帮助多个broker同步数据信息。
在新版本中的kraft模式中可以这个管理和选举可以用kafka自己完成，而不再依赖zookeeper。
搭建kraft集群
首先要设定process.roles，可以人为指定每个人的角色，如果指定broker那么它永远是broker，
如果指定controller那么它一定是controller，但是这样的话其他人就没有办法作为主节点了。
所以一般选择broker,controller可以自动进行适配和选举。
一般一个集群中会设定大部分是broker，少量的几个是controller+broker方便选举。
设定哪几个机器作为协调的机器出现，帮助kafka自身选举
还需要设定对外端口和每个节点的编号
最后还要设定数据存储的位置
log.dirs=/data/kafka-logs
相关文章：
【大数据学习 | kafka高级部分】kafka的kraft集群
首先我们分析一下zookeeper在kafka中的作用 zookeeper可以实现controller的选举，并且记录topic和partition的元数据信息，帮助多个broker同步数据信息。 在新版本中的kraft模式中可以这个管理和选举可以用kafka自己完成，而不再依赖zookeeper。…...
爬虫策略规避：Python爬虫的浏览器自动化
网络爬虫作为一种自动化获取网页数据的技术，被广泛应用于数据挖掘、市场分析、竞争情报等领域。然而，随着反爬虫技术的不断进步，简单的爬虫程序往往难以突破网站的反爬虫策略。因此，采用更高级的爬虫策略，如浏览器自动…...
Hive 实现查询用户连续三天登录记录
标题：Hive 实现查询用户连续三天登录记录 在数据分析和处理中，经常会遇到需要查询特定条件数据的情况。本文将介绍如何使用 Hive 来查询用户连续三天登录的所有数据记录。 一、问题背景 我们有一个用户登录记录表，其中包含用户的登录日期信…...
OceanBase 4.3.3 功能解析：列存副本
OceanBase 从4.3.0 版本开始，引入了列式存储的支持。用户可以根据业务的具体需求，选择创建列存表、行存表或是行列混存表。无论选择哪种表类型，在不同的Zone内，租户使用的副本模式都是一致的。详见官网文档： https://w…...
2.Python解释器
python解释器程序，用来翻译python代码，并提交给计算机执行。 上一篇博客就是安装了python解释器程序 写一个python文件，在文件中写入多行代码并执行： 进入python后，输入exit()命令退出...
鸿蒙与团结引擎c#与ts简单交互
目录 团结中调用ts代码 鸿蒙中调用团结代码 首先在团结创建代码，需要将代码添加到场景物体中 devecoStudio端编写ts代码 在index页面添加一个测试按钮 团结中调用ts代码 团结引擎 - 手册: Call TypeScript plug-in code from C# scripts 注册函数要跟文件名一致 在u…...
Any 的原理以及实现
序言 在 C17 的更新中引入了一个特别有意思的类型，它提供了一种通用的方式来存储任何类型的数据而不需要提前指定类型， 该类型就是 any。 any 允许你将任意类型的数据存储在一个容器中，并且能够在运行时动态地访问该数据。话不多说…...
SQLI LABS | Less-35 GET-Bypass Add Slashes (we dont need them) Integer Based
关注这个靶场的其它相关笔记：SQLI LABS —— 靶场笔记合集-CSDN博客 0x01：过关流程 输入下面的链接进入靶场（如果你的地址和我不一样，按照你本地的环境来）： http://localhost/sqli-labs/Less-35/ 话不多说…...
RNN(循环神经网络)详解
1️⃣ RNN介绍 前馈神经网络（CNN，全连接网络）的流程是前向传播、反向传播和参数更新，存在以下不足： 无法处理时序数据：时序数据长度一般不固定，而前馈神经网络要求输入和输出的维度是固定的&a…...
【AI抠图整合包及教程】探索SAM 2：图像与视频分割领域的革新者
在人工智能的浩瀚星空中，Meta公司的Segment Anything Model 2（SAM 2）犹如一颗璀璨的新星，以其前所未有的图像与视频分割能力，照亮了计算机视觉领域的新航道。SAM 2不仅继承了其前身SAM在零样本分割领域的卓越表现&…...
DevExpress中文教程 - 如何使用AI模型检查HTML编辑中的语法？
DevExpress .NET MAUI多平台应用UI组件库提供了用于Android和iOS移动开发的高性能UI组件，该组件库包括数据网格、图表、调度程序、数据编辑器、CollectionView和选项卡组件等。 目前许多开发人员正在寻找多种方法将AI添加到解决方案中（这通常比想象的要…...
python包管理工具pip和conda的使用对比
python包管理工具pip和conda的使用对比 总述1. pip使用2. conda注意虚拟环境之间的嵌套，这个会导致安装包后看不到包，实际是安装到了base环境里 未完待续 总述 pip相对于conda,对应包的依赖关系管理不强，坏处是容易造成包冲突，好…...
Linux案例：DNS服务器配置
Linux案例：DNS服务器配置 实验一：正向解析 服务端配置： [rootserver ~]# setenforce 0 [rootserver ~]# nmcli c modify ens160 ipv4.method manual ipv4.addresses 192.168.70.131/24 ipv4.gateway 192.168.70.2 ipv4.dns 114.114.114.11…...
【Python】__getitem__()方法
getitem() 方法介绍 __getitem__ 方法是 Python 中的一个特殊方法（也被称为魔术方法或特殊方法），用于在类中实现索引访问对象元素的操作。这个方法允许对象实现类似于列表、字典等容器类型的索引操作。当自定义类中定义了 __getitem__ 方法时…...
《Atomic Picnic》进不去游戏解决方法
Atomic Picnic有时候会遇到进不去游戏的情况，这可能是由多种原因造成的，玩家可以采取很多解决方法，比如检查电脑配置、更新系统和驱动或验证游戏文件。 Atomic Picnic进不去游戏怎么办 检查电脑配置 查看自己的电脑配置是否达到了游戏的要求…...
学习日志007--python函数 学完再练习练
函数小练习 一、函数的概念 1.定义 函数是组织好的，可重复使用的，用来实现单一，或相关联功能的代码段。 2.作用 函数能提高应用的模块性，和代码的重复利用率 3.定义 函数代码块以 def 关键词开头，后接函数标识符…...
DOM操作和事件监听综合练习——轮播图
下面制作一个如下图所示的轮播图（按Enter键可以控制轮播的开启和关闭，或者点击按钮“第几张”即可跳转到第几张）： 下面是其HTML和CSS代码（还没有设置轮播）： <!DOCTYPE html> <html …...
nodejs：下载，安装，系统环境配置，更换镜像
下载 地址：https://nodejs.org/zh-cn/download/prebuilt-installer 安装包 开始安装 安装完成 配置环境变量 将原来的用户变量-> Path D:\nodejs\node_global 【系统变量】 添加Path–>变量名：NODE_PATH-> 变量值：D: \…...
【Django】视图函数
【Django】视图函数 视图函数的本质是Python中的函数，视图函数负责处理用户的请求并返回响应，该响应可以是网页的HTML内容、重定向、404错误、XML文档、图像或者任何东西，一般在应用中的views.py编写，示例代码如下： …...
MySQL查询-补充
数据准备： -- 部门表 create table dept(deptno int primary key, -- 部门编号 主键：唯一，非空dname varchar(14), -- 部门名称loc varchar(13) -- 部门地址 );insert into dept values (10,accounting,n…...
【Python Tips】多个条件判断——一种更加简洁清晰的写法
一、引言 在python写条件判断 if 语句时，有时会遇到多种条件的真假判断考虑，比如要同时考虑A和B两个变量的True or False，只有当两者都为真，或都为假，或任意为真为假，再继续处理。此时如果用 if，…...
【Vue】简易博客项目跟做
项目框架搭建 1.使用vue create快速搭建vue项目 2.使用VC Code打开新生成的项目 端口号简单配置 修改vue.config.js文件，内容修改如下 所需库安装 npm install vue-resource --save --no-fund npm install vue-router3 --save --no-fund npm install axios --save …...
【HarmonyOS】PixelMap转化为Uri
【HarmonyOS】PixelMap转化为Uri 问题背景 鸿蒙中的PixelMap类型，其实类似于Android和IOS中的bitmap，是对图片数据信息进行描述的一种逻辑运算使用的图片类型。 而鸿蒙中的Uri类型，本质其实是带file头的文件存储地址，是用来指向…...
【架构论文-2】架构设计中存在的问题和改进方向
一、性能优化相关 当前情况 在高负载情况下，系统的响应时间出现了一定程度的延迟。特别是在业务高峰期，大量并发请求导致部分关键业务模块的处理效率降低，影响了用户体验。改进方向 计划引入性能分析工具对系统进行全面的性能剖析࿰…...
go语言中的结构体含义和用法详解
在Go语言中，结构体（struct）是一种聚合数据类型，可以将多个不同类型的数据组合成一个更复杂的类型。结构体类似于面向对象编程中的“类”，但是Go语言没有类和继承的概念，而是通过结构体和接口实现面向对象编程的特性。 1. 结构体的定义 结构体是一组字段（field）的集合…...
985研一学习日记 - 2024.11.8
一个人内耗，说明他活在过去；一个人焦虑，说明他活在未来。只有当一个人平静时，他才活在现在。 日常 1、起床 2、健身 3、LeetCode刷了2题 买卖股票的最佳时机 将最大利润拆分为每天的利润之和，仅仅收集每天的正利润…...
编写一个基于React的聊天室
前言 此前已经编写了一版后端的im，此次就用其作为服务端，可查看参考资料1 代码 使用WebStorm创建React项目 安装依赖包 PS C:\learn-demo\front\chatroom> npm installadded 183 packages, and audited 184 packages in 16s43 packages are looki…...
[前端]NodeJS常见面试题目
什么是非阻塞 I/O? Node.js 如何实现非阻塞 I/O? 非阻塞 I/O 是一种编程模式，它允许 I/O 操作（如读取文件、网络请求等）在执行时不阻塞程序的其余部分。换句话说，当一个 I/O 操作发起后，程序可以立即继续执行其他任…...
【实测可用】Sublime Text4 4180 windows 已测可用
------------------测试时间2024年11月7日------------------- 打开浏览器进入网站： 点击进入修改网站打开sublime text4安装目录选择文件sublime_text.exe搜索80 79 05 00 0f 94 c2更改为c6 41 05 01 b2 00 90(第一个匹配到的)保存文件命名为sublime_text.exe并…...
JAVA日期加减运算 JsonObject 转换对象List
1.用java.util.Calender来实现 Calendar calendarCalendar.getInstance(); calendar.setTime(new Date());System.out.println(calendar.get(Calendar.DAY_OF_MONTH));//今天的日期calendar.set(Calendar.DAY_OF_MONTH,calendar.get(Calendar.DAY_OF_MONTH)1);//让日期加1 Sy…...