Kill Anxiety-Netty-TCP粘包半包

简介: Kill Anxiety-Netty-TCP粘包半包

1. 粘包

定义

对方一次性接收了多条消息,这种现象称为粘包。

原因分析

发送方:消息内容远小于TCP缓存区的时候,TCP会合并多条消息一并发出。

接收方:接收不及时,消息存放在缓存区,再读取的时候一次性读出多条消息。

2. 半包

定义

对方多次接收了不完整的消息,这种现象称为半包。

原因分析

  • 发送方发的消息 > 缓存区大小
  • 发送方发送的消息 > MTU (Maximum Transmission Unit,最大传输单元)

3. 解决方案

定长法

固定长度,确定消息边界。以最大的消息长度为固定长度,不足长度的消息的补足长度。

缺点:

浪费空间

不推荐

分割符法

使用固定的分割符分割消息。

缺点:

1)分割符本身做为内容传输时要转义

2)要扫描消息内容才能确定消息的边界

不推荐

长度+内容法

使用固定的长度字节存储消息长度,后面跟消息的内容。读取时,先读取长度信息,再根据读出的长度一次性读出内容。

缺点:需要预先知道消息的最大长度,用于确定存储长度的字节数。

推荐

比较

下面是三种方法的整体比较:

方法

如何确定消息边界

优点

缺点

推荐度

定长法

使用固定长度分割消息

简单

空间浪费

不推荐

分割符法

使用固定分割符分割消息

简单

分割符本身需要转义,且需要扫描消息的内容

不特别推荐

长度 + 内容法

先获取消息的长度,再按长度读取内容

精确获取消息的内容

需要预先知道消息的最大长度

推荐

Netty 是通过三组类来处理粘包 / 半包问题的,分别对应于上面提到的三种方式。

方法

编码

解码

定长法

FixedLengthFrameDecoder

分割符法

DelimiterBasedFrameDecoder

长度 + 内容法

LengthFieldPrepender

LengthFieldBasedFrameDecoder

定长法和分割符法太简单了,Netty 懒得实现。

4. 为什么说UDP无粘包半包问题

先看UDP的报文结构

头部只有 8 个字节( 64 位)

目标和源端口:主要是告诉 UDP 协议应该把报文发给哪个进程。

包长度:该字段保存了 UDP 首部的长度跟数据的长度之和。

校验和:校验和是为了提供可靠的 UDP 首部和数据而设计。

UDP报文中有长度的字段,是16位的,那么UDP报文的最大长度是65536字节,但是一般MTU的大小不会达到65536字节这么大。


UDP 是一个包一个包的发送,是有边界的。UDP 的数据大小如果大于 MTU 大小,则会在 IP 层进行分片,目标主机收到后,在 IP 层组装完数据,接着再传给传输层,但是如果中途丢了一个分片,则就需要重传所有的数据包,这样传输效率非常差,所以通常 UDP 的报文应该小于 MTU。


UDP 不会像 TCP 一样出现粘包 / 半包现象。


资料

本文是 网络编程之Netty一站式精讲 的读书笔记

相关文章
|
1月前
|
编解码 网络协议 开发者
Netty运行原理问题之NettyTCP的粘包和拆包的问题如何解决
Netty运行原理问题之NettyTCP的粘包和拆包的问题如何解决
|
1月前
|
移动开发 网络协议 算法
(十)Netty进阶篇:漫谈网络粘包、半包问题、解码器与长连接、心跳机制实战
在前面关于《Netty入门篇》的文章中,咱们已经初步对Netty这个著名的网络框架有了认知,本章的目的则是承接上文,再对Netty中的一些进阶知识进行阐述,毕竟前面的内容中,仅阐述了一些Netty的核心组件,想要真正掌握Netty框架,对于它我们应该具备更为全面的认知。
|
3月前
|
网络协议
netty粘包问题分析
netty粘包问题分析
30 0
|
3月前
|
消息中间件 存储 网络协议
拼多多面试:Netty如何解决粘包问题?
粘包和拆包问题也叫做粘包和半包问题,**它是指在数据传输时,接收方未能正常读取到一条完整数据的情况(只读取了部分数据,或多读取到了另一条数据的情况)就叫做粘包或拆包问题。** 从严格意义上来说,粘包问题和拆包问题属于两个不同的问题,接下来我们分别来看。 ## 1.粘包问题 粘包问题是指在网络通信中,发送方连续发送的多个小数据包被接收方一次性接收的现象。这可能是因为底层传输层协议(如 TCP)会将多个小数据包合并成一个大的数据块进行传输,导致接收方在接收数据时一次性接收了多个数据包,造成粘连。 例如以下案例,正常情况下客户端发送了两条消息,分别为“ABC”和“DEF”,那么接收端也应该收到两
26 0
拼多多面试:Netty如何解决粘包问题?
|
3月前
|
Java
Netty传输object并解决粘包拆包问题
Netty传输object并解决粘包拆包问题
30 0
|
3月前
|
Java
Netty中粘包拆包问题解决探讨
Netty中粘包拆包问题解决探讨
18 0
|
4月前
|
网络协议 Java 物联网
Spring Boot与Netty打造TCP服务端(解决粘包问题)
Spring Boot与Netty打造TCP服务端(解决粘包问题)
647 1
|
4月前
|
JSON 移动开发 网络协议
数据拆散与黏连:深入剖析Netty中的半包与粘包问题
数据拆散与黏连:深入剖析Netty中的半包与粘包问题
103 0
|
缓存 Java 编解码
netty之粘包分包的处理
  1、netty在进行字节数组传输的时候,会出现粘包和分包的情况。当个数据还好,如果数据量很大。并且不间断的发送给服务器,这个时候就会出现粘包和分包的情况。   2、简单来说:channelBuffer在接收包的时候,会在当时进行处理,但是当数据量一大,这个时候数据的分隔就不是很明显了。
1870 0
|
存储 缓存 NoSQL
跟着源码学IM(十一):一套基于Netty的分布式高可用IM详细设计与实现(有源码)
本文将要分享的是如何从零实现一套基于Netty框架的分布式高可用IM系统,它将支持长连接网关管理、单聊、群聊、聊天记录查询、离线消息存储、消息推送、心跳、分布式唯一ID、红包、消息同步等功能,并且还支持集群部署。
13434 1