Python二进制通信:struct、array、ctypes模块比较

简介: Python是一种广泛应用于数据处理和网络编程的语言。在与C语言或其他设备进行二进制通信时,Python需要使用一些专门的模块来转换数据格式。本文将介绍三个常用的模块:struct、array、ctypes,并从结构说明和性能分析两方面进行比较。

{13F7CD3A-29A5-35E8-44C2-76C84C34FB55}.pngPython是一种广泛应用于数据处理和网络编程的语言。在与C语言或其他设备进行二进制通信时,Python需要使用一些专门的模块来转换数据格式。本文将介绍三个常用的模块:struct、array、ctypes,并从结构说明和性能分析两方面进行比较。

模块

结构说明

适用范围

struct

提供了pack和unpack函数,可以将Python数据转换为字节流,或者将字节流转换为Python数据。它适合处理简单的数据结构,如整数、浮点数、字符串等,但不支持复杂的数据结构,如指针、数组、结构体等。

适合处理简单且固定长度的数据

array

提供了一个类似于列表的对象,可以存储一组相同类型的值,并且占用更少的内存空间。它适合处理一维数组,但不支持多维数组或其他复杂类型。

适合处理大量相同类型且长度可变的数据

ctypes

提供了Structure类,可以直接定义与C语言中相同的结构体,并且支持指针、数组等复杂类型。它适合处理复杂的数据结构,并且可以方便地与动态链接库交互。

适合处理复杂且长度不定

从上图可以看出,在二进制通信中,

  • struct模块有最高的效率,因为它直接使用Python内置 的C函数进行数据转换, 而不需要额外 的对象或内存分配 。它也支持缓冲区协议, 可以避免 数据拷贝。
  • array模块有最低 的效率, 因为它需要创建一个数组对象, 并且每次转换 数据都需要调用方法或属性 。它也不支持缓冲区协议, 所以不能直接与动态链接库交互。
  • ctypes模块 的效率介于struct和array之间, 因为它可以直接定义与C语言兼容 的数据类型, 并且支持缓冲区协议。 但是它也需要创建一些对象, 并且有一些额外 的开销。

综上所述,如果需要处理简单的数据结构,struct模块在二进制通信中有最高的效率。但是,如果需要处理复杂的数据结构,ctypes模块可能是一个更好的选择,因为它支持指针、数组等复杂类型。array模块适合处理一维数组,但在性能方面较低,不支持缓冲区协议,所以不能直接与动态链接库交互。

下面使用ctypes模块进行通信:

# 导入ctypes模块importctypes# 定义一个C语言中的结构体classData(ctypes.Structure):
# 指定结构体的字段和类型_fields_= [
        ("id", ctypes.c_int),
        ("name", ctypes.c_char*20),
        ("value", ctypes.c_float)
    ]
# 创建一个Data数组,并赋值data_array= (Data*3)()
data_array[0].id=1data_array[0].name=b"jack"data_array[0].value=3.14data_array[1].id=2data_array[1].name=b"rose"data_array[1].value=4.56data_array[2].id=3data_array[2].name=b"jack"data_array[2].value=7.89# 导入httpx模块和threading模块importhttpximportthreading# 代理服务器(产品官网 www.16yun.cn)proxyHost="t.16yun.cn"proxyPort="31111"# 代理验证信息proxyUser="16yun"proxyPass="16ip"proxyMeta="http://%(user)s:%(pass)s@%(host)s:%(port)s"% {
"host": proxyHost,
"port": proxyPort,
"user": proxyUser,
"pass": proxyPass,
}
# 设置 http和https访问都是用HTTP代理proxies= {
"http://": proxyMeta,
"https://": proxyMeta,
}
# 定义一个函数,用于发送POST请求,并接收响应内容defsend_request(data):
# 将Data对象转换为字节流bytes_data=bytes(data)
# 创建一个httpx客户端,并设置爬虫加强版代理IPclient=httpx.Client(proxies)
# 发送POST请求,将字节流作为请求体,并设置超时时间为10秒钟response=client.post("http://www.16yun.cn/api", data=bytes_data, timeout=10)
# 打印响应状态码和内容print(response.status_code)
print(response.text)
# 遍历Data数组中的每个元素,判断其name是否等于jack,如果是,则创建一个线程并执行send_request函数,并将该元素作为参数传递给函数;如果不是,则跳过该元素。fordataindata_array:
ifdata.name==b"jack":
thread=threading.Thread(target=send_request, args=(data,))
thread.start()

上述代码通过ctypes.Structure实现指针、数组的复杂类型,然后使用代理IP进行post,实现快速的二进制通信。

相关文章
|
7月前
|
SQL 关系型数据库 数据库
Python SQLAlchemy模块:从入门到实战的数据库操作指南
免费提供Python+PyCharm编程环境,结合SQLAlchemy ORM框架详解数据库开发。涵盖连接配置、模型定义、CRUD操作、事务控制及Alembic迁移工具,以电商订单系统为例,深入讲解高并发场景下的性能优化与最佳实践,助你高效构建数据驱动应用。
846 7
|
7月前
|
监控 安全 程序员
Python日志模块配置:从print到logging的优雅升级指南
从 `print` 到 `logging` 是 Python 开发的必经之路。`print` 调试简单却难维护,日志混乱、无法分级、缺乏上下文;而 `logging` 支持级别控制、多输出、结构化记录,助力项目可维护性升级。本文详解痛点、优势、迁移方案与最佳实践,助你构建专业日志系统,让程序“有记忆”。
561 0
|
7月前
|
JSON 算法 API
Python中的json模块:从基础到进阶的实用指南
本文深入解析Python内置json模块的使用,涵盖序列化与反序列化核心函数、参数配置、中文处理、自定义对象转换及异常处理,并介绍性能优化与第三方库扩展,助你高效实现JSON数据交互。(238字)
596 4
|
8月前
|
安全 大数据 程序员
Python operator模块的methodcaller:一行代码搞定对象方法调用的黑科技
`operator.methodcaller`是Python中处理对象方法调用的高效工具,替代冗长Lambda,提升代码可读性与性能。适用于数据过滤、排序、转换等场景,支持参数传递与链式调用,是函数式编程的隐藏利器。
247 4
|
7月前
|
Java 调度 数据库
Python threading模块:多线程编程的实战指南
本文深入讲解Python多线程编程,涵盖threading模块的核心用法:线程创建、生命周期、同步机制(锁、信号量、条件变量)、线程通信(队列)、守护线程与线程池应用。结合实战案例,如多线程下载器,帮助开发者提升程序并发性能,适用于I/O密集型任务处理。
688 0
|
7月前
|
XML JSON 数据处理
超越JSON:Python结构化数据处理模块全解析
本文深入解析Python中12个核心数据处理模块,涵盖csv、pandas、pickle、shelve、struct、configparser、xml、numpy、array、sqlite3和msgpack,覆盖表格处理、序列化、配置管理、科学计算等六大场景,结合真实案例与决策树,助你高效应对各类数据挑战。(238字)
928 0
|
8月前
|
存储 数据库 开发者
Python SQLite模块:轻量级数据库的实战指南
本文深入讲解Python内置sqlite3模块的实战应用,涵盖数据库连接、CRUD操作、事务管理、性能优化及高级特性,结合完整案例,助你快速掌握SQLite在小型项目中的高效使用,是Python开发者必备的轻量级数据库指南。
685 0
|
9月前
|
存储 安全 数据处理
Python 内置模块 collections 详解
`collections` 是 Python 内置模块,提供多种高效数据类型,如 `namedtuple`、`deque`、`Counter` 等,帮助开发者优化数据处理流程,提升代码可读性与性能,适用于复杂数据结构管理与高效操作场景。
537 0
|
10月前
|
数据安全/隐私保护 Python
抖音私信脚本app,协议私信群发工具,抖音python私信模块
这个实现包含三个主要模块:抖音私信核心功能类、辅助工具类和主程序入口。核心功能包括登录
|
Python
Python教程:os 与 sys 模块详细用法
os 模块用于与操作系统交互,主要涉及夹操作、路径操作和其他操作。例如,`os.rename()` 重命名文件,`os.mkdir()` 创建文件夹,`os.path.abspath()` 获取文件绝对路径等。sys 模块则用于与 Python 解释器交互,常用功能如 `sys.path` 查看模块搜索路径,`sys.platform` 检测操作系统等。这些模块提供了丰富的工具,便于开发中处理系统和文件相关任务。
526 14

热门文章

最新文章

  • 1
    PHP 数组查找:为什么 `isset()` 比 `in_array()` 快得多?
    269
  • 2
    Java 中数组Array和列表List的转换
    971
  • 3
    JavaScript中通过array.map()实现数据转换、创建派生数组、异步数据流处理、复杂API请求、DOM操作、搜索和过滤等,array.map()的使用详解(附实际应用代码)
    704
  • 4
    通过array.reduce()实现数据汇总、条件筛选和映射、对象属性的扁平化、转换数据格式、聚合统计、处理树结构数据和性能优化,reduce()的使用详解(附实际应用代码)
    1527
  • 5
    通过array.some()实现权限检查、表单验证、库存管理、内容审查和数据处理;js数组元素检查的方法,some()的使用详解,array.some与array.every的区别(附实际应用代码)
    641
  • 6
    通过array.every()实现数据验证、权限检查和一致性检查;js数组元素检查的方法,every()的使用详解,array.some与array.every的区别(附实际应用代码)
    453
  • 7
    多维数组操作,不要再用遍历循环foreach了!来试试数组展平的小妙招!array.flat()用法与array.flatMap() 用法及二者差异详解
    294
  • 8
    别再用双层遍历循环来做新旧数组对比,寻找新增元素了!使用array.includes和Set来提升代码可读性
    298
  • 9
    Array.forEach实战详解:简化循环与增强代码可读性;Array.forEach怎么用;面对大量数据时怎么提高Array.forEach的性能
    182
  • 10
    深入理解 JavaScript 中的 Array.find() 方法:原理、性能优势与实用案例详解
    735
  • 推荐镜像

    更多