Python网络编程基础(Socket编程)select模块的使用

简介: 【4月更文挑战第12天】在网络编程中,IO操作(输入/输出操作)通常是性能瓶颈之一。为了提高程序的响应速度和吞吐量,我们可以采用非阻塞IO或异步IO来处理IO操作。这些技术可以使程序在等待IO操作时不会被阻塞,从而能够继续执行其他任务。

在Python中,select模块提供了一种机制来监视多个文件描述符的状态变化,从而实现非阻塞IO。文件描述符是操作系统用于标识打开文件、网络连接等资源的一个整数。通过使用select模块,我们可以同时监视多个Socket连接的状态,并在它们准备好进行读写操作时得到通知。

下面是一个使用select模块实现非阻塞Socket服务器的简单示例:

import socket
import select

def start_server():
    # 创建Socket并绑定到指定地址和端口
    server_socket = socket.socket(socket.AF_INET, socket.SOCK_STREAM)
    server_socket.bind(('localhost', 12345))
    server_socket.listen(5)
    server_socket.setblocking(0)  # 设置为非阻塞模式

    inputs = [server_socket]  # 需要监视的文件描述符列表
    outputs = []  # 准备写入的文件描述符列表

    while inputs:
        readable, writable, exceptional = select.select(inputs, outputs, [])

        # 处理可读的文件描述符
        for s in readable:
            if s is server_socket:
                # 如果是服务器Socket,则接受新的连接
                connection, client_address = s.accept()
                connection.setblocking(0)  # 设置新连接为非阻塞模式
                inputs.append(connection)
            else:
                # 处理客户端发送的数据
                data = s.recv(1024)
                if data:
                    # 如果接收到数据,则将其添加到输出列表准备发送响应
                    outputs.append(s)
                else:
                    # 如果没有数据,则关闭连接并从监视列表中移除
                    s.close()
                    inputs.remove(s)

        # 处理可写的文件描述符
        for s in writable:
            # 发送响应给客户端
            response = "Hello, client!"
            s.sendall(response.encode())
            # 发送完响应后从输出列表中移除
            outputs.remove(s)

if __name__ == "__main__":
    start_server()

在这个示例中,我们首先创建了一个TCP服务器Socket,并将其设置为非阻塞模式。然后,我们初始化一个需要监视的文件描述符列表inputs,其中包含服务器Socket。接下来,我们进入一个循环,使用select.select()函数来监视文件描述符的状态变化。

当某个文件描述符变为可读时,我们检查是否是服务器Socket。如果是,我们接受新的连接,并将新连接的Socket添加到inputs列表中。否则,我们读取客户端发送的数据。如果接收到数据,我们将该Socket添加到outputs列表中,准备发送响应。如果没有数据可读(即客户端关闭了连接),我们关闭该Socket并从inputs列表中移除。

当某个文件描述符变为可写时,我们从outputs列表中取出对应的Socket,发送响应给客户端,并将其从outputs列表中移除。

通过使用select模块,我们可以同时监视多个Socket连接,并在它们准备好进行读写操作时进行处理。这种方式可以避免程序在等待IO操作时被阻塞,从而提高了程序的并发性能和响应速度。然而,需要注意的是,select模块只能监视有限数量的文件描述符,并且在处理大量并发连接时可能会成为性能瓶颈。对于更高性能的需求,可以考虑使用更高级的IO多路复用技术,如epoll(在Linux上)或kqueue(在BSD系统上)。

相关文章
|
18小时前
|
Shell Python
GitHub星标破千Star!Python游戏编程的初学者指南
Python 是一种高级程序设计语言,因其简洁、易读及可扩展性日渐成为程序设计领域备受推崇的语言。 目前的编程书籍大多分为两种类型。第一种,与其说是教编程的书,倒不如说是在教“游戏制作软件”,或教授使用一种呆板的语言,使得编程“简单”到不再是编程。而第二种,它们就像是教数学课一样教编程:所有的原理和概念都以小的应用程序的方式呈现给读者。
|
18小时前
|
机器学习/深度学习 存储 自然语言处理
惊艳!老司机熬夜总结的Python高性能编程,高效、稳定、快速!
Python 语言是一种脚本语言,其应用领域非常广泛,包括数据分析、自然语言处理机器学习、科学计算、推荐系统构建等。 能够轻松实现和代码跑得够快之间的取舍却是一个世人皆知且令人惋惜的现象而这个问题其实是可以解决的。 有些人想要让顺序执行的过程跑得更快。有些人需要利用多核架构、集群,或者图形处理单元的优势来解决他们的问题。有些人需要可伸缩系统在保证可靠性的前提下酌情或根据资金多少处理更多或更少的工作。有些人意识到他们的编程技巧,通常是来自其他语言,可能不如别人的自然。
|
18小时前
|
测试技术 虚拟化 云计算
GitHub高赞!速通Python编程基础手册,被玩出花了!
随着云时代的来临,Python 语言越来越被程序开发人员喜欢和使用,因为其不仅简单易学,而且还有丰富的第三方程序库和相应完善的管理工具。 从命令行脚本程序到 GUI程序,从图形技术到科学计算,从软件开发到自动化测试,从云计算到虚拟化,所有这些领域都有 Python 的身影。 今天给小伙伴们分享的这份手册采用以任务为导向的编写模式,全面地介绍了 Python 编程基础及其相关知识的应用,讲解了如何利用 Python 的知识解决部分实际问题。
GitHub高赞!速通Python编程基础手册,被玩出花了!
|
1天前
|
存储 Python 索引
【Python编程挑战】:单链表实现技巧与最佳实践
【Python编程挑战】:单链表实现技巧与最佳实践
|
1天前
|
数据库 云计算 Python
不容错过的经典!Python核心编程(第3版)教你用实例学Python!
在学完任何其他入门类的 Python 图书之后,你可能觉得已经掌握了 Python 而且还觉得学得不错,并为此感到自豪。通过完成大量练习之后,你将会对自己新掌握的 Python 编程技能拥有更多信心。 但是,你可能仍然会有这样的疑问,“现在该怎么办?我能用 Python 编写哪种类型的应用程序呢?”或许你是为了一个相当小众的工作项目而学习使用 Python,你可能会考虑“我还能用 Python 写点其他的吗?”
|
1天前
|
并行计算 开发者 Python
GitHub标星破千!这份Python并行编程手册,可以封神了!
现在这个时代是并行编程与多核的时代,硬件成本越来越低,如何充分利用硬件所提供的各种资源是每一个软件开发者需要深入思考的问题。若想充分利用所有的计算资源来构建高效的软件系统,并行编程技术是不可或缺的一项技能。
|
2天前
|
SQL 前端开发 Java
Python GUI编程(Tkinter)
Python GUI编程(Tkinter)
|
2天前
|
机器学习/深度学习 自然语言处理 并行计算
YOLOv8改进 | 注意力机制 | 在主干网络中添加MHSA模块【原理+附完整代码】
Transformer中的多头自注意力机制(Multi-Head Self-Attention, MHSA)被用来增强模型捕捉序列数据中复杂关系的能力。该机制通过并行计算多个注意力头,使模型能关注不同位置和子空间的特征,提高了表示多样性。在YOLOv8的改进中,可以将MHSA代码添加到`/ultralytics/ultralytics/nn/modules/conv.py`,以增强网络的表示能力。完整实现和教程可在提供的链接中找到。
|
2天前
|
开发者 Python
GitHub飙升!京东认证的“Python编程入门三剑客”究竟好在哪?
Python凭借着简单易学、功能强大,已经跃居TIOB编程语言榜首,并且已经开始了它的霸榜之旅。如何选择一套适合自己的Python学习教程,是每个Python爱好者面临的首要问题。
|
2天前
|
存储 设计模式 算法
Python基础教程(第3版)中文版 第19章 趣味编程 (笔记)
Python基础教程(第3版)中文版 第19章 趣味编程 (笔记)