Python网络编程之udp编程、黏包以及解决方案、tcpserver

简介: Python网络编程之udp编程、黏包以及解决方案、tcpserver

1、UDP协议编程

Hello,大家好我是景天,上一章我们聊打了Python网络编程,详细介绍了基于TCP协议的编程。TCP协议,每次都要经过三次握手才能建立连接,效率比较低。有没有更快的数据传输方式呢?

今天我们就一起谈谈UDP。

1.udp协议发送数据

udp与tcp基本一样,就是协议类型改下即可

udp第一次只能客户端发送数据,服务端接收到后,知道了客户端的ip和端口,服务端才能给客户端发数据

(1)UDP协议 服务端

import socket 

# 1.创建udp对象
sk = socket.socket(type=socket.SOCK_DGRAM)

# 2.在网络中注册该主机(绑定ip和端口号)
sk.bind( ("127.0.0.1",9000) )

# 3.收发数据的逻辑
"""udp协议下,默认第一次只能接收数据(没有三次握手,不清楚对方的ip和端口号)"""
# 接受数据
msg , addr  = sk.recvfrom(1024)
print(msg.decode())
print(addr)

# 发送数据
sk.sendto( "我喜欢你个锤子".encode()  , addr )

# 4.关闭连接
sk.close()

(2)UDP协议 客户端

import socket 

# 1.创建udp对象
sk = socket.socket(type=socket.SOCK_DGRAM)

# 2.收发数据的逻辑
# 发送数据
msg = "你喜欢我么~"
# sendto(  二进制字节流 , ip端口号  )
sk.sendto(   msg.encode() ,  ("127.0.0.1",9000) )

# 接受数据
msg , addr = sk.recvfrom(1024)
print(msg.decode())
print(addr)

# 3.关闭连接
sk.close()

(3)服务端详解:

#导入模块

import socket

#1.创建socket对象,协议类型用 type关键字来标识。udp的类型是socket.SOCK_DGRAM

udp_server = socket.socket(type=socket.SOCK_DGRAM)

#2.绑定ip和端口

udp_server.bind((“127.0.0.1”,9020))

#3.收发数据,udp是无连接的协议,不需要建立三次握手。第一次只能接收数据

“”“udp协议下,默认第一次只能接收数据(没有三次握手,不清楚对方的ip和端口号)”“”

#接收数据

msg , addr = udp_server.recvfrom(1024)

print(msg.decode())

print(addr)

#在取到客户端的ip和端口号之后,可以发送数据

udp_server.sendto( “我喜欢你个锤子”.encode() , addr )

#4.关闭连接

udp_server.close()

(4)客户端详解

#导入模块

import socket

#1.创建udp——socket对象

udp_client = socket.socket(type=socket.SOCK_DGRAM)

#2.发收数据

msg = “你喜欢我么~”

#sendto( 二进制字节流 , ip端口号 )

udp_client.sendto( msg.encode() , (“127.0.0.1”,9020) )

#接受数据

msg , addr = udp_client.recvfrom(1024)

print(msg.decode())

print(addr)

#3.关闭连接

udp_client.close()

客户端打印:

启用多个客户端:

可见,多个客户端都可以与服务端建立连接,不必等四次挥手断开连接。tcp服务端在与之前的客户端连接不断开的情况下,别人是无法连接上来的。upd可以

客户端打印

服务端默认先回复上次连接的客户端,input是个阻塞程序。服务端收到一个后,需要打字输入后,才能收到下一个客户端的消息

上一次发送消息是谁,服务端就把它的ip和端口号拿过来,回复过去

但凡涉及到聊天,聊天室,都采用udp协议

上传下载,保证数据不丢包采用tcp协议

2、tcp黏包

1.tcp协议在发送数据时,会出现黏包现象.

(1)数据粘包是因为在客户端/服务器的发送端和接收端都会有一个数据缓冲区,
缓冲区用来临时保存数据,默认空间都设置较大。在收发数据频繁时,由于tcp传输消息的无边界特点,不清楚应该截取多少长度,导致客户端/服务器端,都有可能把多条数据当成是一条数据进行截取,造成黏包

(2)发送方引起的粘包是由TCP协议本身造成的,TCP为提高传输效率,发送方往往要收集到足够多的数据后才发送一个数据包。若连续几次发送的数据都很少,通常TCP会根据优化算法把这些数据合成一包后在发送,这样接收方就收到了粘包数据。

(3)接收方引起的粘包是由于接收方用户进程不及时接收数据,从而导致粘包现象。这是因为接收方先把收到的数据放在系统接缓冲区,用户进程从该缓冲区取数据,若下一个数据包到达时,上一个数据包尚未被用户进程取走,则系统可能把多条数据当成是一条数据进行截取

总结: TCP协议是面向连接的无边界协议

黏包现象一:
    在发送端,由于在缓冲区两个数据小,发送的时间隔短,TCP会根据优化算法把这些数据合成一个发送
    
黏包现象二:
    在接收端,由于在缓冲区没及时接受数据,截取数据时把多次发送的数据截取成一条,形成了黏包 

2.黏包对比:tcp和udp

#tcp协议:

缺点:接收时数据之间无边界,有可能粘合几条数据成一条数据,造成黏包

优点:不限制数据包的大小,稳定传输不丢包

#udp协议:

优点:接收时候数据之间有边界,传输速度快,不黏包

缺点:限制数据包的大小(受带宽路由器等因素影响),传输不稳定,可能丢包

#tcp和udp对于数据包来说都可以进行拆包和解包,理论上来讲,无论多大都能分次发送

但是tcp一旦发送失败,对方无响应(对方无回执),tcp可以选择再发,直到对应响应完毕为止

而udp一旦发送失败,是不会询问对方是否有响应的,如果数据量过大,易丢包

3.解决黏包问题

#解决黏包场景:

应用场景在实时通讯时,需要阅读此次发的消息是什么

#不需要解决黏包场景:

下载或者上传文件的时候,最后要把包都结合在一起,黏包无所谓.

模块 socketserver

#网络协议的最底层就是socket,基于原有socket模块,又封装了一层,就是socketserver

socketserver 为了实现tcp协议,server端的并发.

黏包现象:

(1)发送端,数据小,时间间隔短,造成黏包

(2)接收端,没有及时接受数据,可能把多次发送的数据当成一条截取.

案例。服务端分两次发型数据,发送的数据小,时间间隔较短。容易造成黏包。但是最新版的python3.11.2 多次发送时间短,也不会出现黏包

只有接收端,没有及时接收,才把多次发送的数据当成一条数据来接收

客户端收到时,如果接收不及时,会把两次发的,一次性收到打印出来,第二次接收没收到数据。第二次数据黏到第一次数据里面了

常规解决办法思路,多次发送数据时,加个时间间隔,但这种方法不可取,太耽误时间,影响程序运行速度

1.发送时,人为设置边界。第一步、先把要发送的数据大小发送过去。下面要发送的数据,都按这个长度截取。 第二步、发送真实的数据

接收时,第一步,先接受接下来要发送的数据的总大小 第二部,在接受真实的数据

可以解决黏包问题

但,我们每次发送的数据每次不一定一样,长度不一,不能能每次都去数

4.生产中,我们使用struct模块来解决黏包问题

struct 模块使用

基于 struct 模块–解决粘包问题的思路

先将真实的数据打包成固定长度的包;

先把固定长度的包发送过去;

接收后解包得到真实数据的长度;

接收真实数据

import struct

pack 打包

把任意长度数字转换成具有固定4个字节长度的字节流

unpack 解包

把4个字节长度的值恢复成原来的数字,返回元组

(1)pack

#i => int 要转换的当前类型是整型

pack()方法

pack()方法将任意长度的 数字 打包成新的数据,这个新数据的长度是固定。把任意长度数字转换成4个字节长度的字节流

pack()方法 第一个参数是数据格式,第二个参数是整数(数据的长度,转化成字节流后计算长度)

—返回值是一个新的字节流数据

使用pack长度也不是任意大,取值范围: -21亿~21亿左右 控制在1.8G之内 根据是int 32位机器的取值范围 2^31

MTU,链路层最大传输单元 最大1500

是包或帧的最大长度,一般以字节记。如果MTU过大,在碰到路由器时会被拒绝转发,因为它不能处理过大的包。

如果太小,因为协议一定要在包(或帧)上加上包头,那实际传送的数据量就会过小,这样也划不来。

大部分操作系统会提供给用户一个默认值,该值一般对用户是比较合适的。

res = struct.pack(“i” , 999999998)

print(res , len(res))

res = struct.pack(“i” , 1111111119)

print(res , len(res))

res = struct.pack(“i” , 3)

print(res , len(res))

res = struct.pack(“i” , 2000000000)

print(res , len(res))

把任意长度数据转换成4个字节长度的字节流。所以我们可以将数据打包,通过struct取其返回的长度,然后发送时按这个长度发送

struct.pack()返回的就是字节流,可以将任意长度的数据转换成4个字节长度的数据

(2)unpack

#i => 把对应的数据转化成整型

unpack()方法

unpack()方法将固定长度的 数字 解包成打包前数据真实的长度

unpack()方法 第一个参数是数据格式,第二个参数是 pack()方法打包后生成的新数据

返回值是一个元组,元祖中放着打包前数据真实的长度

tup = struct.unpack(“i” , res)

print(tup) #(2000000000,)

print(tup[0])

#解决黏包场景:

应用场景在实时通讯时,需要阅读此次发的消息是什么

#不需要解决黏包场景:

下载或者上传文件的时候,最后要把包都结合在一起,黏包无所谓.

这样,不论数据发送多长,struct都可以动态的取出其长度,打包成4个字节长度

接收时,先接收4个字节长度的数据,再接收真实数据。可以彻底解决黏包问题

服务端

客户端

3、socketserver模块

#网络协议的最底层就是socket,基于原有socket模块,又封装了一层,就是socketserver

socketserver 为了实现tcp协议,server端的并发. 内部实现是多线程

使用时,需要继承该模块中的方法

也可以使用udp:

1.server配置

#网络协议的最底层就是socket,基于原有socket模块,又封装了一层,就是socketserver

socketserver 为了实现tcp协议,server端的并发. 内部实现是多线程

import socketserver

class MyServer(socketserver.BaseRequestHandler):

#该方法名是固定的,不能变.系统自动调用。里面我们可以自定义收发数据的逻辑

def handle(self):

print(self.request)

print(self.client_address)

#实例化socketserver里面的ThreadingTCPServer类 ( ip端口号 , 自定义的类 )

server = socketserver.ThreadingTCPServer((“127.0.0.1”,8898),MyServer)

#调用内部相关函数,服务器一直运行

server.serve_forever()

继承父类,可以使用父类的构造方法

2.socketserver 与socket中的属性比较

self.request <=> conn tcp_server.accept()中的第一个返回值,新的套接字 等价 用来收发数据

self.client_address <=> addr (ip和端口)tcp_server.accept()中的第二个返回值

3.socketserver端口复用

#设置端口复用,更快释放端口

socketserver.TCPServer.allow_reuse_address = True

用了socketserver。服务端,只需要继承系统的类,不用自己创建socket对象。不用监听端口,端口复用,不用四次挥手,关闭套接字服务,这些都是继承的类完成

只需要实例化对象,绑定端口。

自己写收发逻辑即可

收发逻辑写在handle()方法里面,该方法继承了父类,方法名不能更改,系统自己调用

可以修改的点如下箭头指的地方:

客户端,服务端,收发数据必须交错,即是客户端要是先发,服务端就得先收。服务端先发,客户端就得先收

不能同时先收或先发

客户端发送

服务端接收

循环发收,以前通过socket,当服务端与客户端没有断开连接时,其他客户端不能再与服务端建立连接

现在通过socketserver可以实现,并发

可以同时添加多个客户端,而且都能接收到服务端发来的消息



相关文章
|
8天前
|
机器学习/深度学习 人工智能 TensorFlow
人工智能浪潮下的自我修养:从Python编程入门到深度学习实践
【10月更文挑战第39天】本文旨在为初学者提供一条清晰的道路,从Python基础语法的掌握到深度学习领域的探索。我们将通过简明扼要的语言和实际代码示例,引导读者逐步构建起对人工智能技术的理解和应用能力。文章不仅涵盖Python编程的基础,还将深入探讨深度学习的核心概念、工具和实战技巧,帮助读者在AI的浪潮中找到自己的位置。
|
8天前
|
机器学习/深度学习 数据挖掘 Python
Python编程入门——从零开始构建你的第一个程序
【10月更文挑战第39天】本文将带你走进Python的世界,通过简单易懂的语言和实际的代码示例,让你快速掌握Python的基础语法。无论你是编程新手还是想学习新语言的老手,这篇文章都能为你提供有价值的信息。我们将从变量、数据类型、控制结构等基本概念入手,逐步过渡到函数、模块等高级特性,最后通过一个综合示例来巩固所学知识。让我们一起开启Python编程之旅吧!
|
2天前
|
存储 人工智能 数据挖掘
Python编程入门:打造你的第一个程序
本文旨在为初学者提供Python编程的初步指导,通过介绍Python语言的基础概念、开发环境的搭建以及一个简单的代码示例,帮助读者快速入门。文章将引导你理解编程思维,学会如何编写、运行和调试Python代码,从而开启编程之旅。
22 2
|
2天前
|
存储 数据挖掘 开发者
Python编程入门:从零到英雄
在这篇文章中,我们将一起踏上Python编程的奇幻之旅。无论你是编程新手,还是希望拓展技能的开发者,本教程都将为你提供一条清晰的道路,引导你从基础语法走向实际应用。通过精心设计的代码示例和练习,你将学会如何用Python解决实际问题,并准备好迎接更复杂的编程挑战。让我们一起探索这个强大的语言,开启你的编程生涯吧!
|
3天前
|
存储 Python
Python编程入门:理解基础语法与编写简单程序
本文旨在为初学者提供一个关于如何开始使用Python编程语言的指南。我们将从安装Python环境开始,逐步介绍变量、数据类型、控制结构、函数和模块等基本概念。通过实例演示和练习,读者将学会如何编写简单的Python程序,并了解如何解决常见的编程问题。文章最后将提供一些资源,以供进一步学习和实践。
11 1
|
5天前
|
存储 网络协议 IDE
从零起步学习Python编程
从零起步学习Python编程
|
4天前
|
机器学习/深度学习 存储 数据挖掘
Python 编程入门:理解变量、数据类型和基本运算
【10月更文挑战第43天】在编程的海洋中,Python是一艘易于驾驭的小船。本文将带你启航,探索Python编程的基础:变量的声明与使用、丰富的数据类型以及如何通过基本运算符来操作它们。我们将从浅显易懂的例子出发,逐步深入到代码示例,确保即使是零基础的读者也能跟上步伐。准备好了吗?让我们开始吧!
13 0
|
6天前
|
SQL 安全 网络安全
网络安全与信息安全:关于网络安全漏洞、加密技术、安全意识等方面的知识分享
【10月更文挑战第40天】在数字化时代,网络安全和信息安全已成为我们生活中不可或缺的一部分。本文将介绍网络安全漏洞、加密技术以及安全意识等方面的知识,帮助读者更好地了解网络安全的重要性,并提供一些实用的技巧和建议,以保护个人和组织的信息安全。
29 6
|
2天前
|
安全 算法 网络协议
网络安全与信息安全:关于网络安全漏洞、加密技术、安全意识等方面的知识分享
在数字时代,网络安全和信息安全已经成为了我们生活中不可或缺的一部分。本文将介绍网络安全漏洞、加密技术和安全意识等方面的内容,帮助读者更好地了解网络安全的重要性和应对措施。通过阅读本文,您将了解到网络安全的基本概念、常见的网络安全漏洞、加密技术的原理和应用以及如何提高个人和组织的网络安全意识。
|
3天前
|
存储 安全 算法
网络安全与信息安全:漏洞、加密与意识的三重防线
在数字时代的浪潮中,网络安全与信息安全成为维护数据完整性、确保个人隐私和企业资产安全的基石。本文将深入探讨网络漏洞的成因、加密技术的应用以及安全意识的培养,旨在通过技术与教育的结合,构建起一道坚固的防御体系。我们将从实际案例出发,分析常见的网络安全威胁,揭示如何通过加密算法保护数据安全,并强调提升个人和组织的安全意识在防范网络攻击中的重要性。

热门文章

最新文章

下一篇
无影云桌面