当前位置： 首页 > news >正文

Java 消息策略的实现 - Kafak 是怎么设计的

news 文章来源：https://blog.csdn.net/huyuchengus/article/details/133115335 2025/1/17 5:54:39

这个也是开放讨论题，主要讨论下 Kafka 在消息中是如何进行实现的。

1_cCyPNzf95ygMFUgsrleHtw

1_cCyPNzf95ygMFUgsrleHtw976×506 21.4 KB

总结

这个题目的开发性太强了。

Kafka 可以用的地方非常多，我经历过的项目有 Kafka 用在消息处理策略上的。这个主要是 IoT 项目，因为这个项目需要对温度传感器采集获得数据。

当我们有多个数据采集点的时候，通常是在每分钟发送几条数据的样子。

哪怕是这种使用场景，我觉得从系统架构的考虑来说还是过于臃肿了，因为 Kafka 的运行需要 ZooKeeper，一套 ZooKeeper 的运行至少是需要 3 台服务器。

正常的生产环境部署，我们可能要部署到 5 太服务器上。

对于一个每秒钟消息都不到 1 条的消息服务器来说，实在是太重了。

其实这种使用场景，我们可以用一些轻量的消息服务器，比如说 ActiveMQ，我就觉得非常好。

可以简单到使用一个 Docker 容器就可以完成了，但消息处理能力也还是强大的。

对于 Kafka 这种野兽级的消息处理服务器，实在是用不上。

缓存

我们还经历过一个项目，Kafka 被用作缓存了。

每次项目启动的时候，都需要从 Kafka 上获得缓存数据，然后系统才能运行。

这个也是非常痛苦的，有时候因为缓存机制的使用不确定，导致部分时候的数据缓存上没有。

然后在调试的过程中就非常的痛苦。

面试回答

根据上面的情况，对这开放性的问题，通常只需要说说你对问题的了解情况就好了。

一般来说还是不会要求你做到具体的实现的，只要你对消息服务器有一些相关的知识，上面的 2 个使用案例还是比较经典的。

其实消息服务器还有很多可以使用的场景，比如说数据解耦，对爬虫数据的数据解耦等等，都是可以用的。

很多公司还会做一个消息服务器，比如说对订阅用户的消息回复，手机消息推送等等，都需要我们的消息服务器去处理。

所以这个问题为设计型问题，只需要对相关问题有所了解即可。

Java 消息策略的实现 - Kafak 是怎么设计的 - 求职路上 - iSharkFly

相关文章：

Java 消息策略的实现 - Kafak 是怎么设计的

这个也是开放讨论题，主要讨论下 Kafka 在消息中是如何进行实现的。 1_cCyPNzf95ygMFUgsrleHtw976506 21.4 KB 总结 这个题目的开发性太强了。 Kafka 可以用的地方非常多，我经历过的项目有 Kafka 用在消息处理策略上的。这个主要是 IoT 项目&#xff0c…...

编程日记 2023/9/22 1:07:46

c++opencv RotatedRect 旋转矩形角度转换和顶点顺序转换

这里写自定义目录标题 以下代码记录主要是完成轮廓点求解最小外接矩形之后计算该文本行的角度和旋转矩形的左下（bl），左上（tl)，右上（tr),右下（br)的坐标点。 RotatedRect rtminAreaRect(contours…...

编程日记 2023/9/22 1:06:45

Flink-CDC 抽取SQLServer问题总结

Flink-CDC 抽取SQLServer问题总结 背景 flink-cdc 抽取数据到kafka 中，使用flink-sql进行开发，相关问题总结flink-cdc 配置SQLServer cdc参数 1.创建CDC 使用的角色, 并授权给其查询待采集数据数据库 -- a.创建角色 create role flink_role;-- b.授权…...

编程日记 2023/9/22 1:05:44

Linux 系统目录结构 终端

系统目录结构 Linux 或 Unix 操作系统中，所有文件和目录呈一个以根节点为始的倒置的树状结构。文件系统的最顶层是根目录，用 / 来表示根目录。在根目录之下的既可以是目录，也可以是文件，而每一个目录中又可以包含子目录文件。如此…...

编程日记 2023/9/22 1:04:43

Layui + Flask | 实现注册、登录功能（案例篇）（08）

此案例内容比较多，建议滑到最后点击阅读原文，阅读体验更佳。后续也会录制案例视频，将在本周内上传到同名的 b 站账号。 已经看了 layui 表单相关的知识，接下来就可以实现注册功能，功能逻辑如下： 项目创建 新建 flask 项目下载 layui 文件，解压之后复制到指定文件编写前…...

编程日记 2023/9/22 1:03:42

GitLab数据迁移后出现500错误

一、背景 去年做GitLab数据迁移时，写过一篇文章《GitLab的备份与还原》。后来发现新创建的项目没问题，但对于迁移过来的项目，修改名称等信息，或者删除该项目时，会出现500错误，以为是系统问题&#…...

编程日记 2023/9/22 1:00:40

音乐随行，公网畅享，群辉Audiostation给你带来听歌新体验！

文章目录 本教程解决的问题是：按照本教程方法操作后，达到的效果是本教程使用环境：1 群晖系统安装audiostation套件2 下载移动端app3 内网穿透，映射至公网 很多老铁想在上班路上听点喜欢的歌或者相声解解闷儿，于是打开手…...

编程日记 2023/9/22 0:57:38

机器学习入门：从算法到实际应用

机器学习入门：从算法到实际应用 机器学习入门：从算法到实际应用摘要引言机器学习基础1. 什么是机器学习？2. 监督学习 vs. 无监督学习 机器学习算法3. 线性回归4. 决策树和随机森林 数据准备和模型训练5. 数据预处理6. 模型训练与调优 实际应用…...

编程日记 2023/9/22 0:56:37

【Vue.js】vue-cli搭建SPA项目并实现路由与嵌套路由---详细讲解

一，何为SPA SPA（Single Page Application）是一种 Web 应用程序的开发模式，它通过使用 AJAX 技术从服务器异步加载数据，动态地更新页面内容，实现在同一个页面内切换不同的视图，而无需整页刷新 1.…...

编程日记 2023/9/22 0:54:34

Node.js 调用 fluent-ffmpeg

最近开发H5资源在线裁剪，最终在资源合成的步骤，选择 ffmpeg 作为合成的插件，记录下使用方式。 一、介绍 ffmpeg 一款跨平台多媒体处理工具，可以进行视频转码、裁剪、合成、音视频提取、推流等操作。 二、安装 Node js 可以利用…...

编程日记 2023/9/22 0:52:32

scrapy框架--

Scrapy是一个用于爬取数据的Python框架。下面是Scrapy框架的基本操作步骤： 安装Scrapy：首先，确保你已经安装好了Python和pip。然后，在命令行中运行以下命令安装Scrapy：pip install scrapy 创建Scrapy项目：…...

编程日记 2023/9/22 0:51:32

算法通关村第十五关——从40亿个数中产生一个不存在的数的处理方法

1.从40个亿中产生一个不存在的整数 题目要求：给定一个输入文件，包含40亿个非负整数，请设计一个算法，产生一个不存在该文件中的整数，假设你有1GB的内存来完成这项任务。**** 解题中心思想：存储的不是这40亿…...

编程日记 2023/9/22 0:50:31

软件项目开发的流程及关键点

软件项目开发的流程及关键点 graph LR A[需求分析] --> B[系统设计] B --> C[编码开发] C --> D[测试验证] D --> E[部署上线] E --> F[运维支持]在项目开发的流程中，首先是进行需求分析，明确项目的目标和功能要求。接下来是系统设计&am…...

编程日记 2023/9/22 0:49:29

全球变暖问题（floodfill 处理联通块问题）

全球变暖问题 文章目录 全球变暖问题前言题目描述题目分析边界问题的考虑岛屿是否被淹没判断：如何寻找联通块： 代码预告 前言 之前我们介绍了 bfs算法在二维，三维地图中的应用，现在我们接续进行拓展，解锁floodfill 算…...

编程日记 2023/9/22 0:47:27

由于找不到vcruntime140_1.dll怎么修复，详细修复步骤分享

在使用电脑过程中，可能会遇到一些错误提示，其中之一是找不到vcruntime140_1.dll的问题。这使得许多用户感到困扰，不知道该如何解决这个问题。小编将详细介绍vcruntime140_1.dll的作用以及解决找不到该文件的方法，帮助你摆脱困境。…...

编程日记 2023/9/22 0:45:26

算法 三数之和-(双指针)

牛客网: BM54 题目: 数组中所有不重复的满足三数之和等于0的数，非递减形式。 思路: 数组不小于3。不重复非递减，需先排序。使用idx从0开始遍历到n-2, 如果出现num[idx]num[idx-1]的情况，忽略继续下一个idx；令left idx1, right …...

编程日记 2023/9/22 0:43:24

AB实验总结

互联网有线上系统，可做严格的AB实验。传统行业很多是不能做AB实验的。 匹配侧是采用严格的AB实验来进行模型迭代，而精细化定价是不能通过AB实验来评估模型好坏，经历过合成控制法、双重差分法，目前采用双重差分法来进行效果评估。…...

编程日记 2023/9/22 0:42:23

sklearn包中对于分类问题，如何计算accuracy和roc_auc_score？

1. 基础条件 import numpy as np from sklearn import metricsy_true np.array([1, 7, 4, 6, 3]) y_prediction np.array([3, 7, 4, 6, 3])2. accuracy_score计算 acc metrics.accuracy_score(y_true, y_prediction)这个没问题 3. roc_auc_score计算 The binary and mul…...

编程日记 2023/9/22 0:39:21

python温度转换程序

1.使用pycharm运行温度转换程序，尝试将温度单位设在前面 2.参照温度转换程序,自己写一个关于货币转换、长度转换、重量转换或者面积转换的程序 循环函数 def convertemperature():temperature ""while (temperature ! "q"):temperature in…...

编程日记 2023/9/22 0:38:20

Vue2中10种组件通信方式和实践技巧

目录 1，props / $emit1.1，一个需求方法1方法2 1.2，v-model 和 .syncv-model.sync 2，$children / $parent3，ref4，$attrs / $listeners$attrs$listenersinheritAttrs1.1 的问题的第3种解决方法 5，…...

编程日记 2023/9/22 0:35:17

Flutter flutter.minSdkVersion的实际文件位置

Flutter 项目的Android相关版本号配置： flutter.minSdkVersion 的版本号配置文件实际路径： …/flutter_sdk/packages/flutter_tools/gradle/src/main/groovy/flutter.groovy Flutter版本号如下： bzbMacBook-Pro ccsmec % flutter --version …...

编程日记 2023/9/22 0:34:16

python生成PDF报告

前言 最近接到了一个需求-将项目下的样本信息汇总并以PDF的形式展示出来，第一次接到这种PDF的操作的功能，还是有点慌的，还好找到了reportlab这个包，可以定制化向PDF写内容！ 让我们由简入深进行讲解 一、reportlab是…...

编程日记 2023/9/22 0:31:14

在visual studio里安装Python并创建python工程

在2009年，云计算开始发力，Python、R、Go这些天然处理批量计算的语言也迅猛发展。微软在2010年，把Python当成一个语言包插件，集成到了visual studio 2010里。在"云优先，移动优先"的战略下，于2015年…...

编程日记 2023/9/22 0:30:12

AIGC（生成式AI）试用 6 -- 从简单到复杂

从简单到复杂，这样的一个用例该如何设计？ 之前浅尝试用，每次尝试也都是由浅至深、由简单到复杂。 一点点的“喂”给生成式AI主题，以测试和验证生成式AI的反馈。 AIGC（生成式AI）试用 1 -- 基本文本_Role…...

编程日记 2023/9/22 0:29:10

竞赛 基于深度学习的人脸识别系统

前言 🔥 优质竞赛项目系列，今天要分享的是 基于深度学习的人脸识别系统 该项目较为新颖，适合作为竞赛课题方向，学长非常推荐！ 🧿 更多资料, 项目分享： https://gitee.com/dancheng-senior/…...

编程日记 2023/9/22 0:28:09

uniapp：APP开发，后台保活

前言： 在ios中，软件切换至后台、手机息屏，过了十来秒软件就会被系统挂起，APP内的任务就不能继续执行；在android中，默认情况下，软件在后台运行的时候，触发某些特定条件的情况下&…...

编程日记 2023/9/22 0:27:08

vue2 项目中嵌入视频

案例&#xff1a; 代码&#xff1a; <template><div class"schematicDiagramIndex"><el-container><el-aside width"20rem"> <!-- <h4 style"font-size: 18px">视频演示</h4>--><div styl…...

编程日记 2023/9/22 0:25:07

第二章 进程与线程 十二、进程同步与进程互斥

目录 一、进程同步 1、定义 二、进程互斥 1、定义 2、四个部分 3、原则 一、进程同步 1、定义 进程同步是指在多个进程之间协调执行顺序的一种机制&#xff0c;使得进程按照一定的顺序执行&#xff0c;以避免出现不一致的情况。常见的实现方式有信号量、管程、屏障等。…...

编程日记 2023/9/22 0:23:05

Linux内核链表(list)移植到任意平台

一、前言 linux内核链表在include/linux/list.h文件中&#xff0c;内核中实现的链表比较简洁&#xff0c;实用性很强&#xff0c;因此想把它单独移植出来使用。 内核中的代码只能使用gnuc编译器编译&#xff0c;stdc编译器编译是会报错的&#xff0c;主要是因为typeof这个宏是…...

编程日记 2023/9/22 0:22:04

【操作系统】聊聊什么是CPU上下文切换

对于linux来说&#xff0c;本身就是一个多任务运行的操作系统&#xff0c;运行远大于CPU核心数的程序&#xff0c;从用户视角来看是并发执行&#xff0c;而在CPU视角看其实是将不同的CPU时间片进行分割&#xff0c;每个程序执行一下&#xff0c;就切换到别的程序执行。那么这个…...

编程日记 2023/9/22 0:20:02

个人门户网站建设流程/培训机构查询网

看到渣浪的查看文章或者查看大图有个效果&#xff1a;弹窗查看内容时&#xff0c;如果内容过长有滚动条&#xff0c;则滚动条会被放到body区滚动 什么意思呢&#xff1f; 看个图片&#xff0c;一般正常弹窗是有宽高限制的&#xff0c;如果内容过长则直接在弹窗中进行滚动 点我预…...

编程日记 2025/1/17 5:42:22

建设网站设计公司/他达拉非片的作用及功效副作用

美国网络安全公司FireEye研究人员发现&#xff0c;最近有不法分子向中东多家银行发送大量包含恶意代码的垃圾邮件&#xff0c;一旦用户打开附件&#xff0c;其中的恶意程序就会盗取银行的网络信息&#xff0c;为后续顺利实施盗窃做准备。 这一消息来自于香港《文汇报》&#xf…...

编程日记 2025/1/17 2:32:20

做一家电商网站需要多少钱/营销网络是啥意思

端口处于err-disabled状态的几种原因: 1.双工不匹配. 2.端口信道的错误配置. 3.违反BPDU守护(BPDU Guard)特性. 4.单向链路检测(UDLD). 5.检测到后期冲突. 6.链路振荡. 7.违反某些安全策略. 8.端口聚合协议(PAgP)的振荡. 9.层2隧道协议(L2TP)守护(L2TP Guard). 10.DH…...

编程日记 2025/1/16 23:58:57

酒店推广平台有哪些/宁波seo搜索引擎优化

Chapter1 统计学习方法概论 统计学习方法是基于数据构建统计模型从而对数据进行预测与分析。统计学习由监督学习( supervised learning)、非监督学习(unsupervised learning )、半监督学习(semi-supervised learning)和强化学习(reinforcement learning)等组成。本文主要讨论监…...

编程日记 2025/1/16 23:45:37

网站建设销售主管岗位职责/正版seo搜索引擎

冻哭了&#xff01;今(28日)早中央气象台升级发布寒潮橙色预警&#xff01;这也是最高级别的寒潮预警&#xff01;28日08时山东省气象台发布寒潮黄色和海上大风黄色预警信号山东省气象台于12月28日11时00分继续发布大雾橙色预警信号↓↓↓目前&#xff0c;济南、聊城、淄博、潍…...

编程日记 2025/1/16 22:35:15

网站搭建制作免费/百度广告收费表

// 借用构造函数// 其基本思路是在子类型构造函数的内部调用父类型的构造函数function Person(name){this.name name;this.friends ["Jack","John","Kim"];}function SuperPerson(name,sex){//继承PersonPerson.call(this,name);//call()将Per…...

编程日记 2025/1/16 21:36:52