Netty_03_ByteBuf和网络中拆包粘包问题及其解决

最新推荐文章于 2025-06-16 17:10:58 发布
最新推荐文章于 2025-06-16 17:10:58 发布
阅读量1.4k 收藏 1
点赞数
CC 4.0 BY-SA版权
分类专栏： JavaSE 文章标签： 网络 jvm java
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_36963950/article/details/123595142

文章目录

一、前言

本文讲述三个问题

bytebuf + 网络中的粘包拆包 + 编码解码

源码下载：https://www.syjshare.com/res/1PGT166S

二、ByteBuf（Netty API中定义的数据类型）

bytebuff四点
（1） 256 扩容方式（小于512 大于512）
（2）新建bytebuff两种方式 堆内（jvm） 堆外(操作系统)
（3）四个字段：废弃 读指针 写指针 可扩容 读写api
（4）零拷贝三种方式

2.1 ByteBuf

在Netty中，还有另外一个比较常见的对象ByteBuf，它其实等同于Java Nio中的ByteBuffer，但是
ByteBuf对Nio中的ByteBuffer的功能做了很作增强，下面我们来简单了解一下ByteBuf。

下面这段代码演示了ByteBuf的创建以及内容的打印，这里显示出了和普通ByteBuffer最大的区别之
一，就是ByteBuf可以自动扩容，默认长度是256，如果内容长度超过阈值时，会自动触发扩容

2.1.1 ByteBuf创建的方法有两种

第一种，创建基于堆内存的ByteBuf

ByteBuf
了解本专栏 订阅专栏 解锁全文 超级会员免费看
Netty-ByteBuf
追梦的小狼狗
07-18 749
ByteBuf 由于NIO编程的复杂性，ByteBuffer也有其局限性，主要缺点如下： ByteBuffer长度固定，一旦分配成功，容量无法动态扩展或者伸缩，当需要编码的POJO对象大于ByteBuffer容量，会出现越界 ByteBuffer只有一个标识位置的指针position，读写的时候需要不断地手工调用flip()和rewind()等，否则很容易导致程序失败 ByteBuffer的AP...
Netty - Bytebuf（1）
iteye_20566的博客
04-18 212
Netty - ByteBuf 1.1 原生的ByteBuffer Java NIO的ByteBuffer被称为字节缓冲区。此类针对字节缓冲区定义了以下六类操作： 读写单个字节的绝对和相对 get 和 put 方法； 将此缓冲区的连续字节序列传输到数组中的相对批量 get 方法； 将 byte 数组或其他字节缓冲区中的连续字节序列传输到此缓冲区的相对批量 put 方法； 读写其他基本...
Netty解决黏包拆包问题
最新发布
m0_54712443的博客
06-16 314
方式三：LengthFieldBasedFrameDecoder + LengthFieldPrepender（自定义 TCP 协议）方式二：WebSocketServerProtocolHandler（用于 WebSocket 协议）特点：自动处理 chunked 分块传输，适合 REST、WebSocket 握手等场景。特点：支持文本帧、二进制帧、Ping/Pong 帧等完整协议特性。作用：使用指定分隔符（如 \r\n 或 $$）来切分消息。特点：适用于简单文本协议，但容易受内容干扰，效率较低。
netty中的ByteBuf
weixin_34343308的博客
05-14 301
网络数据的基本单位总是字节。Java NIO 提供了 ByteBuffer 作为它 的字节容器，但是这个类使用起来过于复杂，而且也有些繁琐。 Netty 的 ByteBuffer 替代品是 ByteBuf，一个强大的实现，既解决了 JDK API 的局限性， 又为网络应用程序的开发者提供了更好的 API。 一、ByteBuf 的 API Netty 的数据处理 API 通过两个组件暴露——a...
结合RPC框架通信谈 netty如何解决TCP粘包问题
山月记
07-27 968
0.起因 因为自己造一个RPC框架的轮子时，需要解决TCP的粘包问题，特此记录，希望方便他人。这是我写的RPC框架的 GitHub地址 https://github.com/yangzhenkun/krpc。 欢迎star，fork。已经写了多篇文章对这个框架的原理进行说明。对原理有兴趣的欢迎交流。 1.什么是粘包 1.1 什么是TCP粘包 TCP粘包就是在TCP数据传输过程中，...
Netty ByteBuf
五石之瓠 以为大樽 浮于江湖 悠笑人生
05-20 1238
本章讲包括： ByteBuf ——　Netty 的数据容器(data container) API 详情 使用样例 内存分配 如前所述，网络数据的基本单位始终是字节。 Java NIO提供了ByteBuffer作为其字节容器，但是这个类使得使用过于复杂并且使用起来有点麻烦。 Netty替代ByteBuffer的是ByteBuf，这是一个强大的实现，可以解决JDK API的局限性，并为网络应用程...
netty拆包粘包解决方案示例
07-28
本文将深入探讨Netty中解决拆包粘包问题的策略，以及客户端断线重连的实现方式。 首先，我们需要理解什么是“拆包”和“粘包”。在TCP/IP通信中，由于TCP协议的流式传输特性，数据可能会被分片或者合并，这就可能...
Netty中的粘包、拆包与丢包问题及其解决方案详解
微笑听雨
06-19 6297
在Netty中，通过使用合适的解码器（如定长解码器、换行符解码器、分隔符解码器和长度字段解码器）可以有效解决粘包和拆包问题。同时，结合TCP的重传机制和应用层的重传策略，可以有效地减少丢包现象，确保数据传输的可靠性。选择合适的方案需要根据具体的应用场景和协议要求来定。
使用 Netty 自定义解码器处理粘包和拆包问题详解
微笑听雨
06-20 5120
在网络编程中，粘包和拆包问题是常见的挑战。粘包是指多个数据包在传输过程中粘在一起，而拆包是指一个数据包在传输过程中被拆分成多个部分。Netty 是一个高性能、事件驱动的网络应用框架，提供了强大的工具来解决这些问题。
Netty中粘包和拆包的解决方案
凉茶铺的博客
08-04 578
粘包和拆包是TCP网络编程中不可避免的，无论是服务端还是客户端，当我们读取或者发送消息的时候，都需要考虑TCP底层的粘包/拆包机制。TCP是个“流”协议，所谓流，就是没有界限的一串数据。TCP底层并不了解上层业务数据的具体含义，它会根据TCP缓冲区的实际情况进行包的划分，所以在业务上认为，一个完整的包可能会被TCP拆分成多个包进行发送，也有可能把多个小的包封装成一个大的数据包发送，这就是所谓的TCP粘包和拆包问题。...
Netty 解决粘包和拆包问题的四种方案
weixin_44749255的博客
02-29 4979
Netty 解决粘包和拆包问题的四种方案
Netty拆包粘包
逍遥生
03-31 202
拆包 拆包是指netty传输数据时候，会把一条信息，拆成几部分。比如："hello "拆成"he" 和 "llo"等， 粘包 粘包是指将多条信息连在一起 比如发送“hello”和"123"，而受到的是 "hello123" 解决方案： 消息定长，比如固定传100字符，不够的用空格补充 在尾部添加特殊字符 发送信息是发送信息长度 下面我们来看一下定长怎么用 客户端 @Data public class MyMessageProtocol { //定义一次发送包体长度 .
Netty--原理--TCP--粘包与拆包
IT利刃出鞘的博客
06-01 1556
本文介绍Netty是如何解决TCP的粘包与拆包问题的。
netty的byteBuf
wst6663017的博客
10-14 487
1.byteBuf是什么 byteBuf是netty对nio的byteBuffer的现实，因为byteBuff使用场景有限 2.byteBuf类关系图 3.为什么netty要用bytebuf来替换bytebuffer 1.使用readIndex和writeIndex来解决每次读写时需要进行flip操作的问题 简化了读写的操作，读有读的指针，写有写的指针，互补干扰 2.封装了每次put需要进行可写空...
Netty的拆包粘包
wly5503的博客
03-25 292
Netty 在基于 TCP 协议的网络通信中，存在拆包与粘包情况。拆包与粘包同时发生在数据的发送方与接收方两方。 发送方通过网络每发送一批二进制数据包，那么这次所发送的数据包就称为一帧，即Frame。在进行基于 TCP 的网络传输时，TCP 协议会将用户真正要发送的数据根据当前缓存的实际情况对其进行拆分或重组，变为用于网络传输的 Frame。在 Netty 中就是将 ByteBuf中的数据拆分或重...
Netty——ByteBuf
qq_41157876的博客
12-17 174
ByteBuf 类图 ByteBuf 与 ByteBuffer 属性 / 方法 ByteBuf相关辅助类 ByteBufHolder ByteBufAllocator CompositeByteBuf ByteBufUtil 1. ByteBuf 1.1 ByteBuf类图 1.2 ByteBuf 与 ByteBuffer的区别 ByteBuffer中只有一个index，ByteBuf中有readIndex和writeIndex 由于有两个index，By.
Netty之ByteBuf
ZERO
05-05 3229
在使用NIO时需要使用缓冲区，常用的缓冲区就是JDK NIO类库提供的java.nio.Buffer，而主要使用的是ByteBuffer。但是ByteBuffer也有局限性： 1.ByteBuffer长度固定，一旦分配完成，它的容量就不能动态扩展和收缩，当需要编码的POJO对象大于ByteBuffer的容量时，会发送索引越界异常； 2.ByteBuf...
Netty 数据传输载体 —— ByteBuf
悟已往之不谏，知来者之可追
11-25 1012
在学习编解码的过程中，我们看到 Netty 大量使用了自己实现的 ByteBuf 工具类，ByteBuf 是 Netty 的数据容器，所有网络通信中字节流的传输都是通过 ByteBuf 完成的。然而 JDK NIO 包中已经提供了类似的 ByteBuffer 类，为什么 Netty 还要去重复造轮子呢？那就要好好说说 ByteBuf。 文章目录为什么是 ByteBufByteBuf 内部结构引用计数ByteBuf 分类ByteBuf 核心 API指针操作 API数据读写 API内存管理 APIByteBuf
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

祖母绿宝石

打赏一下

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值