网络原理 -Posix API

简介: 网络原理 -Posix API

网络原理 -Posix API

思考

  • Posix API 有哪些?
  • 三次握手的过程 ?发生在什么函数中?
  • Accept发生在三次握手的哪一步?
  • 数据发送过程怎么解决粘包分包的问题?
  • 四次挥手过程?服务器出现大量的close_wait()原因?
  • 被动方, 主动方的tcb的回收是在什么时候?
  • websocket 为什么设置FIN位
  • TCP在listen时的参数backlog的意义?

八种Posix API

Tcp server:1.socket();2.bind();3.listen();4.accept();5.recv();6.send();7.close()

Tcp client:1.socket();2.bind()(optional);3.connect();4recv();5.send();6.close()

非必须设置socket参数:setsockopt();getsockopt()

bind() 的主要作用:接受或者发送数据,用来填充本机的IP与端口。

socket是什么?

socket,socket有两部分组成fdtcb,即文件描述符,tcb即tcp控制块,就像插座一样,就是fd,是文件系统中的文件描述符,可以被“操作的”。tcb在协议栈当中,我们“不需要管”,就像所谓的,不用管具体是什么样。当操作fd,调用send(),fd的数据就放到sendbuffer中,当调用recv()时将recvbuffer中的数据放到fd中。

socket 5元组

站在客户端角度来说socket五元组(remoteip, remoteprot,localip, localport,proto)中remoteip与remoteprot 为远端IP和端口,即服务器的IP和端口,localip与localport为本地IP和端口,即客户端IP和端口,proto是协议。

站在服务器角度来说(source ip, source port, dest ip, dest port, proto)中source ip与source port为源IP与端口,即客户端IP与端口,dest ip与dest port 为目的IP与端口,即服务器IP与端口,proto是协议

// socket创建的fd从3开始
//0为stdin,1为stdout,2为stderr
int fd = socket();
fd = 3

“一见钟情”与“移情别恋”

三次握手过程

三次握手发生在connect()函数里面。connect()类似一个导火索

int clientfd = accept();
只做两件事情:1、从全连接队列取出一个节点;2、为该节点分配fd放到。
fd -->tcb,通过五元组

数据的发送

为什么会出现粘包拆包以及怎么解决?

粘包粘包 简单的来讲就是接收端收的次数比发送端发送的次数少,出现两个包合在一起的情况。

简单说有以下几种情况:

1.TCP将多次写入缓冲区的数据一次发送出去,将会发生粘包。

2.接收数据端的应用层没有及时读取接收缓冲区中的数据,将发生粘包。

3.待发送数据大于最大报文长度(MMS),TCP在传输前将进行拆包。

4.发送的数据大于TCP发送缓冲区剩余空间大小,将会发生拆包。

简单的来说,TCP是基于字节流的,即使应用层和TCP传输层之间的数据交互是大小不等的数据块,然而TCP把这些数据块仅仅看成一连串无结构的字节流,没有边界。从TCP的帧结构也可以看出,在TCP的首部没有表示数据长度的字段,基于这两点,TCP传输数据时,才会出现粘包或者拆包现象的可能。

解决方式,简述两种解决思路:1.在协议前加上要传输数据长度。2.加上包的分隔符。

另外,这里还有一个问题,如何保证我们接收的数据是顺序的?所谓的顺序,就是先发的先到。这里要说的就是延迟ack,它可以保证所谓的“顺序”

留一个思考:Tcp已经这么强了,为什么还要有UDP?

四次挥手的过程

主动方调用close()函数后,fin位置1,申请断开连接。

服务器出现大量的close_wait()原因与解决方式?

原因:

1.没有及时调用close()函数。

2.业务逻辑的问题。

简述解决方案: 要么提前调用close(),要么将业务信息放在线程池去处理,close放在另一个线程中去处理。

websocket 为什么设置FIN位

把业务买用户数据清空,防止出现大量的close_wait(),再完成这些操作以后再调用close()关闭。

思考问题:作为客户端,做一个业务的请求(如http的请求),请求第三方的业务。出现一种情况,客户端一直处于fin_wait2的状态(可能由于在server端中close之前,服务器掉电客户端直接进入fin_wait2的状态),要么这个问题就不解,再启动一个连接。如果FIN_WAIT_2的超时时间(tmo)大于TCP_TIMEWAIT_LEN(60秒)的时长,启动keepalive定时器,定时时长为二者之差(tmo - TCP_TIMEWAIT_LEN)。

client与server同时发送fin的情况

服务器出现大量的time_wait怎么做?

**简述原因:**应用中产生大量TIME_WAIT状态的根本原因是频繁创建断开连接TCP连接。要解决TIME_WATIT状态过多的问题,就要分析我们的应用把频繁创建的短连接改为长连接。

    后台业务服务器,通常需要调用redis、mysql以及其他http服务和grpc服务,在服务相互调用中,如果使用的是短连接,高并发时就会产生大量TIME_WAIT。一般情况下,redis等客户端会有连接池,我们要做的是设置好相关的连接服用参数,一般会有连接数、连接重用时间、连接空闲数等。所以在应用中通过设置合理的连接池参数可以避免TIME_WAIT状态过多的问题。

总结

1)POSIX API八个,socket(), bind()具体作用;

2)三次握手的过程,中间发生在哪些API当中,connect()是怎么调用,listen()accept()是怎么执行;

3)数据传输的过程,send()拷贝数据到sendbuffer中,内核协议栈决定怎么去发送,recv()将recvbuffer中将数据拷出来;

4)四次挥手,断开连接的过程,close()的操作,以及相关过程中遇到的问题。

5>clientserver同时发送fin。


相关文章
|
6月前
|
机器学习/深度学习 PyTorch TensorFlow
卷积神经网络深度解析:从基础原理到实战应用的完整指南
蒋星熠Jaxonic,深度学习探索者。深耕TensorFlow与PyTorch,分享框架对比、性能优化与实战经验,助力技术进阶。
|
6月前
|
监控 负载均衡 安全
WebSocket网络编程深度实践:从协议原理到生产级应用
蒋星熠Jaxonic,技术宇宙中的星际旅人,以代码为舟、算法为帆,探索实时通信的无限可能。本文深入解析WebSocket协议原理、工程实践与架构设计,涵盖握手机制、心跳保活、集群部署、安全防护等核心内容,结合代码示例与架构图,助你构建稳定高效的实时应用,在二进制星河中谱写极客诗篇。
WebSocket网络编程深度实践:从协议原理到生产级应用
|
7月前
|
机器学习/深度学习 人工智能 算法
卷积神经网络深度解析:从基础原理到实战应用的完整指南
蒋星熠Jaxonic带你深入卷积神经网络(CNN)核心技术,从生物启发到数学原理,详解ResNet、注意力机制与模型优化,探索视觉智能的演进之路。
633 11
|
7月前
|
安全 测试技术 虚拟化
VMware-三种网络模式原理
本文介绍了虚拟机三种常见网络模式(桥接模式、NAT模式、仅主机模式)的工作原理与适用场景。桥接模式让虚拟机如同独立设备接入局域网;NAT模式共享主机IP,适合大多数WiFi环境;仅主机模式则构建封闭的内部网络,适用于测试环境。内容简明易懂,便于理解不同模式的优缺点与应用场景。
1029 0
|
7月前
|
机器学习/深度学习 算法 搜索推荐
从零开始构建图注意力网络:GAT算法原理与数值实现详解
本文详细解析了图注意力网络(GAT)的算法原理和实现过程。GAT通过引入注意力机制解决了图卷积网络(GCN)中所有邻居节点贡献相等的局限性,让模型能够自动学习不同邻居的重要性权重。
1320 0
从零开始构建图注意力网络:GAT算法原理与数值实现详解
|
9月前
|
机器学习/深度学习 人工智能 PyTorch
零基础入门CNN:聚AI卷积神经网络核心原理与工业级实战指南
卷积神经网络(CNN)通过局部感知和权值共享两大特性,成为计算机视觉的核心技术。本文详解CNN的卷积操作、架构设计、超参数调优及感受野计算,结合代码示例展示其在图像分类、目标检测等领域的应用价值。
499 7
|
9月前
|
JSON 监控 API
在线网络PING接口检测服务器连通状态免费API教程
接口盒子提供免费PING检测API,可测试域名或IP的连通性与响应速度,支持指定地域节点,适用于服务器运维和网络监控。
1366 0
|
9月前
|
API Python
免费网络北京时间API接口
本文介绍如何通过接口盒子的免费API获取当前北京时间,支持多种格式及POST/GET请求方式。需注册账号获取ID和KEY,适用于服务器时间同步、日志记录等场景。
3381 6
|
10月前
|
JSON 编解码 API
Go语言网络编程:使用 net/http 构建 RESTful API
本章介绍如何使用 Go 语言的 `net/http` 标准库构建 RESTful API。内容涵盖 RESTful API 的基本概念及规范,包括 GET、POST、PUT 和 DELETE 方法的实现。通过定义用户数据结构和模拟数据库,逐步实现获取用户列表、创建用户、更新用户、删除用户的 HTTP 路由处理函数。同时提供辅助函数用于路径参数解析,并展示如何设置路由器启动服务。最后通过 curl 或 Postman 测试接口功能。章节总结了路由分发、JSON 编解码、方法区分、并发安全管理和路径参数解析等关键点,为更复杂需求推荐第三方框架如 Gin、Echo 和 Chi。
|
10月前
|
安全 Java 程序员
分析Muduo网络库源码中的TcpServer组件工作原理
简言之,TcpServer 在 Muduo 中的角色,就是一位终极交通指挥员,它利用现代计算机网络的魔法,确保数据如同车辆一般,在信息高速公路上自由、安全、高效地流动。
128 0
下一篇
开通oss服务