当前位置： 首页 > news >正文

netty应用-手写RPC

news 2025/9/18 12:56:24

文章目录

  • 手写RPC之案例定位与通信过程介绍
      • RPC框架案例定位
      • 服务端与客户端架构
      • 通信过程
        • 1. 服务注册与发现
        • 2. 请求序列化与传输
        • 3. 请求处理与响应
        • 4. 响应反序列化与结果处理
      • 实现细节
        • 1. 服务端
        • 2. 客户端
      • 技术选型
      • 关键挑战
      • 总结
  • 手写RPC之请求响应通信协议定制
      • 协议结构
        • 示例消息头格式
        • 示例消息体格式
      • 序列化与反序列化
      • 错误处理
      • 实现示例
        • Protobuf定义
        • 发送请求
        • 接收响应
      • 总结
  • 手写RPC之Hessian序列化与反序列化
      • 添加依赖
      • 序列化
      • 反序列化
      • 使用示例
      • 注意事项
  • 手写RPC之Hessian序列化请求响应测试
      • 步骤1：定义请求和响应对象
      • 步骤2：实现Hessian序列化和反序列化
      • 步骤3：模拟服务端处理逻辑
      • 步骤4：客户端发送请求
      • 步骤5：服务端接收请求并响应
  • 手写RPC之Netty编码器序列化封装
      • 1. 创建序列化工具类
      • 2. 创建解码器
      • 3. 配置Netty的`ChannelPipeline`
      • 4. 测试和调试
  • 手写RPC之消息长度校验与读索引标记
      • 1. 消息长度校验
      • 2. 读索引标记与重置
      • 3. 使用标记和重置来处理半包读取
      • 总结
  • 手写RPC之消息长度负值校验与拆包校验
      • 1. 消息长度负值校验
      • 2. 拆包校验
      • 3. 综合使用
  • 手写RPC之拆包问题处理与读索引复位
      • 拆包问题处理
        • 手动处理拆包
      • 读索引复位
      • 总结
  • 手写RPC之拆包后等待下次数据输入分析
      • 1. 标记读索引
      • 2. 等待下次数据输入
      • 3. 重置读索引并继续读取
      • 4. 自定义解码器处理
      • 5. 使用`LengthFieldBasedFrameDecoder`
      • 总结
  • 手写RPC之字节数组反序列化为指定类
      • 1. Hessian反序列化
      • 2. Java序列化反序列化
      • 3. Jackson JSON反序列化
      • 示例使用
  • 手写RPC之服务提供端NettyServer搭建
      • 1. 引入Netty和Hessian依赖
      • 2. 创建服务端处理类
      • 3. 创建服务端初始化器
      • 4. 启动服务端
  • 手写RPC之NettyServerHandler请求处理
      • 1. 引入必要的包
      • 2. 定义`NettyServerHandler`类
      • 3. 定义`Request`类
      • 4. 注册`NettyServerHandler`
  • 手写RPC之基于反射调用目标类方法
      • 步骤概述
      • 定义请求类
      • 定义响应类
      • 编写服务器端
      • 编写客户端
      • 使用反射调用方法
        • 示例服务接口
        • 示例服务实现
        • 客户端代码
  • 手写RPC之log4i2日志框架与响应封装
      • 1. 引入Log4j2依赖
      • 2. 配置Log4j2
      • 3. 使用Log4j2记录日志
      • 4. 封装响应
        • 定义响应类
        • 在`NettyServerHandler`中封装响应
      • 5. 客户端处理响应
  • 手写RPC之服务调用端网络通信封装
      • 1. 引入Netty依赖
      • 2. 定义请求和响应类
      • 3. 创建客户端初始化器
      • 4. 创建客户端处理类
      • 5. 创建客户端启动类
  • 手写RPC之服务调用端Bootstrap封装完毕
      • 1. 创建客户端启动类
      • 2. 创建客户端初始化器
      • 3. 创建客户端处理类
      • 4. 定义请求和响应类
      • 完整客户端启动类
  • 手写RPC之远程调用方法实现与过程分析
      • 1. 定义请求和响应类
      • 2. 客户端初始化器
      • 3. 客户端处理类
      • 4. 客户端启动类
      • 5. 服务端初始化器
      • 6. 服务端处理类
      • 7. 服务端启动类
      • 过程分析
  • 手写RPC之服务调用端Handler逻辑实现
      • 1. 客户端Handler类
      • 2. 请求和响应类
      • 3. 客户端初始化器
      • 4. 客户端启动类
      • 过程分析
  • 手写RPC之服务调用端timeout功能实现
      • 1. 更新客户端Handler类
      • 2. 更新请求类
      • 3. 更新客户端启动类
      • 过程分析
  • 手写RPC之响应返回时的timeout超时处理
      • 1. 更新客户端Handler类
      • 2. 更新请求类
      • 3. 更新客户端启动类
      • 过程分析
  • 手写RPC之服务调用端响应结果封装
      • 1. 定义响应结果封装类
      • 2. 更新客户端Handler类
      • 3. 客户端启动类
      • 过程分析
  • 手写RPC之服务提供端ServiceConfig
      • 1. ServiceConfig 类设计
      • 2. ServiceConfig 的使用示例
        • 服务接口定义
        • 服务实现类
        • ServiceConfig 使用
      • 3. 服务注册和发布
      • 4. 示例代码
      • 过程分析
  • 手写RPC之服务提供端代理多ServiceConfig
      • 1. ServiceConfig 类
      • 2. ServiceRegistry 类
      • 3. ServiceDispatcher 类
      • 4. 服务注册和发布
      • 5. 示例代码
      • 过程分析
  • 手写RPC之服务调用端ReferenceConfig
      • 1. ReferenceConfig 类设计
      • 2. ReferenceConfig 的使用示例
        • 服务接口定义
        • 服务调用端
      • 3. 完整的服务调用端代码
      • 4. RpcClientHandler 类
      • 过程分析
  • 手写RPC之服务调用端接口动态代理实现
      • 1. 定义服务接口
      • 2. 实现动态代理
      • 3. 完整的服务调用端代码
        • ReferenceConfig 类
        • NettyRpcClient 类
      • 4. RpcClientHandler 类
      • 5. 使用示例
      • 过程分析
  • 手写RPC之发起连接与远程调用请求
      • 1. 定义服务接口
      • 2. 定义RPC请求和响应
      • 3. 实现动态代理
      • 4. 完整的服务调用端代码
        • ReferenceConfig 类
        • NettyRpcClient 类
      • 5. RpcClientHandler 类
      • 6. 使用示例
      • 过程分析
  • 手写RPC之远程调用流程测试与问题修复
      • 测试案例
      • 1. 成功调用远程服务
        • 客户端测试
      • 2. 超时测试
        • 客户端测试
      • 3. 异常处理测试
        • 客户端测试
      • 4. 并发调用测试
        • 客户端测试
      • 问题修复
      • 示例代码中的问题修复
      • 更新后的代码片段
      • 总结
  • 手写RPC案例中发送RPC请求的字节数组
      • 序列化和反序列化的实现
        • 1. 序列化
        • 2. 反序列化
      • 示例代码
        • 客户端发送RPC请求
        • 服务器接收RPC请求
      • 注意事项
  • 基于手写RPC案例分析字节流粘包拆包
      • 粘包和拆包的原因
      • 解决方案
      • 示例：基于长度前缀的消息拆分
        • 1. 修改`RpcRequest`和`RpcResponse`
        • 2. 序列化和反序列化
        • 3. 发送端
        • 4. 接收端
      • 完整的Netty处理器链
        • 5. Netty处理器链
      • 示例代码
        • 客户端
        • 服务端
      • 总结
  • 手写RPC案例中对粘包拆包问题的解决分析
      • 粘包和拆包问题
      • 解决方案
      • 实现步骤
      • 示例代码
        • 1. 消息格式定义
        • 2. 编码器 - `RpcMessageEncoder`
        • 3. 解码器 - `RpcMessageDecoder`
        • 4. Netty处理器链配置
      • 完整的客户端和服务端示例
        • 客户端
        • 服务端
      • 总结

手写RPC之案例定位与通信过程介绍

设计和实现一个自己的远程过程调用（RPC）框架是一个既挑战又具有教育意义的项目，它不仅帮助加深对分布式系统原理的理解，还能锻炼在实际场景下的编程技能。下面，我将概述一个简单的RPC框架的设计思路和通信过程，以及如何通过一个案例来定位和实现这一过程。

RPC框架案例定位

假设我们要实现一个简单的计算器服务，该服务能够执行加法、减法、乘法和除法操作。我们的目标是让客户端能够远程调用这个服务，就像调用本地方法一样。

服务端与客户端架构

  1. 服务端：定义服务接口和实现，例如 CalculatorService 接口和相应的实现类。

  2. 客户端：定义服务接口的相同版本，并提供一个代理类来远程调用服务端的方法。

通信过程

1. 服务注册与发现
  • 服务注册：服务端启动时，向注册中心（如Zookeeper或Consul）注册服务信息，包括服务名、地址和端口。
  • 服务发现：客户端通过注册中心查找服务端的信息，以建立连接。
2. 请求序列化与传输
  • 客户端：客户端调用代理方法时，将方法名、参数类型和参数值序列化成字节流（如

相关文章：

netty应用-手写RPC

文章目录 手写RPC之案例定位与通信过程介绍RPC框架案例定位服务端与客户端架构通信过程1. 服务注册与发现2. 请求序列化与传输3. 请求处理与响应4. 响应反序列化与结果处理实现细节1. 服务端2. 客户端技术选型关键挑战总结手写RPC之请求响应通信协议定制协议结构示例消息头格式…...

编程日记 2024/8/3 19:26:33

私域流量变迁与精细移动化趋势下的AI智能名片小程序源码应用探索

摘要：随着移动互联网技术的飞速发展，私域流量的价值日益凸显，成为企业营销战略的重要组成部分。私域流量的精细化和移动化趋势不仅改变了传统的营销格局，也为新兴技术的应用提供了广阔空间。本文深入探讨了私域流量的变迁历程&…...

编程日记 2024/8/3 19:23:27

数据结构初阶之排序（下）

前言 上一期内容中我们了解了基本排序中的插入与选择排序，今天我将为大家带来剩下的几种排序算法 快速排序 快速排序是Hoare于1962年提出的⼀种⼆叉树结构的交换排序⽅法，其基本思想为：任取待排序元素序列中的某元素作为基准值，…...

编程日记 2024/8/3 19:21:23

RGB图像的读取与保存

目录 1、安装imageio 2、读取照片 3、保存照片 4、resize 5、示例代码 1、安装imageio pip install imageio -i https://pypi.tuna.tsinghua.edu.cn/simple 2、读取照片 import imageio img imageio.imread(image_path) 3、保存照片 import imageio import numpy as…...

编程日记 2024/8/3 19:20:22

江协科技51单片机学习- p35 AD/DA模拟/数字采样

🚀write in front🚀 🔎大家好，我是黄桃罐头，希望你看完之后，能对你有所帮助，不足请指正！共同学习交流 🎁欢迎各位→点赞👍 收藏⭐️ 留言📝​…...

编程日记 2024/8/3 19:16:17

C#裁剪图像的几种方法总结

前言 我们在上位机软件开发过程中经常需要裁剪图像，本文就是对c#中常见的裁剪图像方法进行总结。 1、克隆 直接调用Bitmap的Clone函数，然后指定需要裁剪的区域即可裁剪图像，该种方法不会损失精度 public static Bitmap CropImage_Clone(Bi…...

编程日记 2024/8/3 19:14:13

被遗忘的哑终端 —— 键盘键位演变的启发者

注：机翻，未校对。 The Forgotten World of Dumb Terminals 被遗忘的哑终端世界 A quick journey through the lost age of “glass teletypes.” 快速穿越失落的“玻璃电传打字机”时代。 From the earliest days of digital computers, researchers o…...

编程日记 2024/8/3 19:13:12

APACHE安装与应用

💝💝💝欢迎来到我的博客，很高兴能够在这里和您见面！希望您在这里可以感受到一份轻松愉快的氛围，不仅可以获得有趣的内容和知识，也可以畅所欲言、分享您的想法和见解。 推荐:Linux运维老纪的首页…...

编程日记 2024/8/3 19:11:09

预警器件控制思考

预警器件控制思考 最小示例思想 当读取到环境信息与环境阈值的时候, 我们预警系统就要根据这些信息做出判断,是否要启动器件。 最简单的就是， 举温度temp的例子, temp(温度)与temp_th(阈值), 通过判断, 得出是否要启动器件. 如果在一段时间内, 一直是环境异常, 我…...

编程日记 2024/8/3 19:10:08

[Day 43] 區塊鏈與人工智能的聯動應用：理論、技術與實踐

區塊鏈的隱私保護機制 隨著區塊鏈技術的廣泛應用，隱私保護成為了一個至關重要的問題。區塊鏈以其去中心化和透明性的特點，為數據管理和交易提供了新的方法。然而，這些特點也帶來了新的挑戰，尤其是在隱私保護方面。本文將深入探討…...

编程日记 2024/8/3 19:08:02

【星海随笔】路由器的启动过程

路由器的启动过程 1.加电之后，ROM运行加电自检程序（Post），检查路由器的处理器、接口、内存等硬件设备。2.执行路由器中的启动程序(Bootstrap),搜索操作系统。路由器操作系统扩张部分可以从Flash RAM中装入，也可从 TFT…...

编程日记 2024/8/3 19:05:56

[翻译] Asset Administration Shells

关于资产管理外壳 (AAS) 资产管理外壳 (AAS) 是工业4.0中的关键概念，为产品、资源（如设备）和过程提供信息隐藏和更高层次的抽象。AAS 是技术和设备无关的机器可读描述，提供访问资产属性和功能的统一接口。与现有解决方案不同&…...

编程日记 2024/8/3 19:03:53

linux 常用磁盘维护命令

badblocks 功能说明&#xff1a;检查磁盘装置中损坏的区块。 语 法&#xff1a;badblocks [-svw][-b <区块大小>][-o <输出文件>][磁盘装置][磁盘区块数][启始区块] 补充说明&#xff1a;执行指令时须指定所要检查的磁盘装置&#xff0c;及此装置的磁盘区块数。…...

编程日记 2024/8/3 19:02:52

滑动窗口大总结！！！妈妈以后再也不担心我不会做滑动窗口啦~

写在前面&#xff1a;全部题都源于力扣 讲解题目一&#xff1a;最小覆盖子串题目二&#xff1a;字符串排列题目三&#xff1a;找所有字母异位词题目四&#xff1a;无重复字符的最长子串题目五&#xff1a;滑动窗口的最大值 讲解 滑动窗口算法技巧主要用来解决子数组问题&#…...

编程日记 2024/8/3 19:01:51

从地铁客流讲开来：客流统计与清分释义

一、常见的客流统计 1. 进站客流 定义&#xff1a;指在某个时间段内&#xff0c;乘客进入地铁站的数量。示例&#xff1a;如果某天早上8点到9点之间有5000人次进入地铁站&#xff0c;则这段时间内的进站客流为5000人次。 2. 出站客流 定义&#xff1a;指在某个时间段内&…...

编程日记 2024/8/3 19:00:49

《Excelize权威指南》新书发布

在数据洪流涌动的数字化时代&#xff0c;数据处理与分析已跃升为解锁无限洞察力的金钥匙&#xff0c;赋能商业智慧、重塑医疗健康版图、驱动教育科研创新。然而&#xff0c;当数据量级爆炸式增长&#xff0c;传统工具如 Excel 虽被誉为数据处理领域的常青树&#xff0c;其手动操…...

编程日记 2024/8/3 18:59:47

Go语言加Vue3零基础入门全栈班11 Go语言+gorm用户管理系统实战 2024年08月03日 课程笔记

概述 如果您没有Golang的基础&#xff0c;应该学习如下前置课程。 Golang零基础入门Golang面向对象编程Go Web 基础Go语言开发REST API接口_20240728Go语言操作MySQL开发用户管理系统API教程_20240729Redis零基础快速入门_20231227GoRedis开发用户管理系统API实战_20240730Mo…...

编程日记 2024/8/3 18:56:43

【设计模式】代理模式详解

1.简介 代理模式是常用的Java设计模式&#xff0c;该模式的特点是代理类与委托类共享相同的接口。代理类主要负责预处理消息、过滤消息、将消息转发给委托类&#xff0c;并在事后处理消息等。代理类与委托类之间通常存在关联关系&#xff0c;一个代理类对象与一个委托类对象关…...

编程日记 2024/8/3 18:55:41

Python变量和简单的数据类型

1、变量 massageHello python world! print(massage) massageHello world print(massage) 运行这个代码发现&#xff0c;同一个变量出现两个不同的结果 Hello python world! Hello world 在程序中&#xff0c;可随时修改变量的值&…...

编程日记 2024/8/3 18:54:39

切比雪夫距离

切比雪夫距离&#xff08;Chebyshev Distance&#xff09;&#xff0c;又称棋盘距离或最大值距离&#xff0c;是一种用于测量两个点之间距离的度量方法。在二维平面上&#xff0c;切比雪夫距离定义为两个点之间的最大坐标差值。其公式如下&#xff1a; DChebyshevmax⁡(∣x2−…...

编程日记 2024/8/3 18:53:38

AI-调查研究-01-正念冥想有用吗？对健康的影响及科学指南

点一下关注吧&#xff01;&#xff01;&#xff01;非常感谢&#xff01;&#xff01;持续更新&#xff01;&#xff01;&#xff01; &#x1f680; AI篇持续更新中&#xff01;&#xff08;长期更新&#xff09; 目前2025年06月05日更新到&#xff1a; AI炼丹日志-28 - Aud…...

编程新知 2025/9/14 13:49:41

XCTF-web-easyupload

试了试php&#xff0c;php7&#xff0c;pht&#xff0c;phtml等&#xff0c;都没有用 尝试.user.ini 抓包修改将.user.ini修改为jpg图片 在上传一个123.jpg 用蚁剑连接&#xff0c;得到flag...

编程新知 2025/9/14 1:53:04

手游刚开服就被攻击怎么办？如何防御DDoS？

开服初期是手游最脆弱的阶段&#xff0c;极易成为DDoS攻击的目标。一旦遭遇攻击&#xff0c;可能导致服务器瘫痪、玩家流失&#xff0c;甚至造成巨大经济损失。本文为开发者提供一套简洁有效的应急与防御方案&#xff0c;帮助快速应对并构建长期防护体系。 一、遭遇攻击的紧急应…...

编程新知 2025/9/18 10:30:16

基于服务器使用 apt 安装、配置 Nginx

&#x1f9fe; 一、查看可安装的 Nginx 版本 首先&#xff0c;你可以运行以下命令查看可用版本&#xff1a; apt-cache madison nginx-core输出示例&#xff1a; nginx-core | 1.18.0-6ubuntu14.6 | http://archive.ubuntu.com/ubuntu focal-updates/main amd64 Packages ng…...

编程新知 2025/8/26 18:00:13

【快手拥抱开源】通过快手团队开源的 KwaiCoder-AutoThink-preview 解锁大语言模型的潜力

引言&#xff1a; 在人工智能快速发展的浪潮中&#xff0c;快手Kwaipilot团队推出的 KwaiCoder-AutoThink-preview 具有里程碑意义——这是首个公开的AutoThink大语言模型&#xff08;LLM&#xff09;。该模型代表着该领域的重大突破&#xff0c;通过独特方式融合思考与非思考…...

编程新知 2025/9/6 0:09:27

python如何将word的doc另存为docx

将 DOCX 文件另存为 DOCX 格式&#xff08;Python 实现&#xff09; 在 Python 中&#xff0c;你可以使用 python-docx 库来操作 Word 文档。不过需要注意的是&#xff0c;.doc 是旧的 Word 格式&#xff0c;而 .docx 是新的基于 XML 的格式。python-docx 只能处理 .docx 格式…...

编程新知 2025/8/5 19:18:33

【决胜公务员考试】求职OMG——见面课测验1

2025最新版&#xff01;&#xff01;&#xff01;6.8截至答题&#xff0c;大家注意呀&#xff01; 博主码字不易点个关注吧,祝期末顺利~~ 1.单选题(2分) 下列说法错误的是:&#xff08; B &#xff09; A.选调生属于公务员系统 B.公务员属于事业编 C.选调生有基层锻炼的要求 D…...

编程新知 2025/8/26 21:58:04

NLP学习路线图（二十三）：长短期记忆网络（LSTM）

在自然语言处理（NLP）领域，我们时刻面临着处理序列数据的核心挑战。无论是理解句子的结构、分析文本的情感，还是实现语言的翻译，都需要模型能够捕捉词语之间依时序产生的复杂依赖关系。传统的神经网络结构在处理这种序列依赖时显得力不从心，而循环神经网络（RNN） 曾被视为…...

编程新知 2025/9/3 5:05:40

uniapp中使用aixos 报错

问题&#xff1a; 在uniapp中使用aixos&#xff0c;运行后报如下错误&#xff1a; AxiosError: There is no suitable adapter to dispatch the request since : - adapter xhr is not supported by the environment - adapter http is not available in the build 解决方案&…...

编程新知 2025/8/7 21:07:39

Go 语言并发编程基础：无缓冲与有缓冲通道

在上一章节中&#xff0c;我们了解了 Channel 的基本用法。本章将重点分析 Go 中通道的两种类型 —— 无缓冲通道与有缓冲通道&#xff0c;它们在并发编程中各具特点和应用场景。 一、通道的基本分类 类型定义形式特点无缓冲通道make(chan T)发送和接收都必须准备好&#xff0…...

编程新知 2025/9/13 17:45:05