【Python零基础入门篇 · 24】:协程和IO操作的简单理解、greenlet协程模块的使用、gevent模块的使用、程序打补丁、总结

简介: 【Python零基础入门篇 · 24】:协程和IO操作的简单理解、greenlet协程模块的使用、gevent模块的使用、程序打补丁、总结

一、协程和IO操作的简单理解


1、协程的理解


协程,又称微线程,纤程。英文名Coroutine。


协程是python个中另外一种实现多任务的方式,只不过比线程更小占用更小执行单元(理解为需要的资源)。 为啥说它是一个执行单元,因为它自带CPU上下文。这样只要在合适的时机, 我们可以把一个协程 切换到另一个协程。 只要这个过程中保存或恢复 CPU上下文那么程序还是可以运行的。


通俗的理解: 在一个线程中的某个函数,可以在任何地方保存当前函数的一些临时变量等信息,然后切换到另外一个函数中执行,注意不是通过调用函数的方式做到的,并且切换的次数以及什么时候再切换到原来的函数都由开发者自己确定。


适用场景:如果一个线程里面IO操作(网络等待、文件操作)比较多,协程就比较适用,适用于高并发处理。


2、简单实现协程

d516cc65fd244eeb8c5693955ead3c8e.png


3、IO操作的简单理解


IO就是input/output,也就是输入和输出。


常见的IO操作:文件操作、网络等待




二、greenlet协程模块的使用


greenlet:是一个用C实现的协程模块,通过switch()来实现任务函数间的切换。


greenlet属于手动切换任务,当遇到IO操作,程序会阻塞,而不能进行自动切换。


greenlet为第三方库模块,需要在Terminal中输入下载命令:pip install greenlet


1、通过greenlet实现任务切换


导入模块:from greenlet import greenlet


实例化协程对象:greenlet(任务名)


下图代码逻辑


代码执行到g1.switch()时转换到eat()函数中运行,当执行到g2.switch()时任务切换到study()函数中运行

8dec099da231409ebe1803903eed35e0.png



三、gevent模块的使用


原理是当一个greenlet遇到IO(指的是input output 输入输出,比如网络、文件操作等)操作时,比如访问网络,就自动切换到其他的greenlet,等到IO操作完成,再在适当的时候切换回来继续执行。 由于IO操作非常耗时,经常使程序处于等待状态,有了gevent为我们自动切换协程,就保证总有greenlet在运行,而不是等待IO。


gevent遇到IO操作,会进行自动切换,属于主动式切换。在gevent中用到的主要模式是greenlet


1、grevent的使用


  • gevent.spawn(函数名)——创建协程对象


  • join()——阻塞,等待某个协程执行完毕


  • joinall(参数)——参数是一个协程对象列表,会等待所有的协程都执行完毕再退出



2、gevent模块中自带了sleep耗时函数


执行A/B两个任务,当A、B遇到耗时操作,gevent会让A继续执行,同时也开始执行B任务。


A完成了耗时操作后,B在对应的时间也完成了耗时操作。


c4d0e98a553e46a78a6edfb13a66de1a.png


3、joinall()的使用


9a5d1cbe86a24724aa5eec717751cf87.png


四、程序打补丁


猴子补丁功能:拥有在模块运行时的替换能力


  • 导入模块:from gevent import monkey

532e197e3e134f7d9e4a0d679000c34c.png


五、总结



1、进程是资源分配的基本单位,线程是CPU调度的基本单位。


2、对比

  • 进程:切换需要的资源较大,效率低


  • 线程:切换需要的资源一般,效率一般


  • 协程:切换需要的资源很小,效率高


多线程适合IO密集型操作(读写数据操作多的)


多进程适合CPU密集型操作(科学计算、对视频进行高清解码等)


相关文章
|
10天前
|
人工智能 自然语言处理 Shell
[oeasy]python070_如何导入模块_导入模块的作用_hello_dunder_双下划线
本文介绍了如何在Python中导入模块及其作用,重点讲解了`__hello__`模块的导入与使用。通过`import`命令可以将外部模块引入当前环境,增强代码功能。例如,导入`__hello__`模块后可输出“Hello world!”。此外,还演示了如何使用`help()`和`dir()`函数查询模块信息,并展示了导入多个模块的方法。最后,通过一个实例,介绍了如何利用`jieba`、`WordCloud`和`matplotlib`模块生成词云图。总结来说,模块是封装好的功能部件,能够简化编程任务并提高效率。未来将探讨如何创建自定义模块。
31 8
|
7天前
|
缓存 Shell 开发工具
[oeasy]python071_我可以自己做一个模块吗_自定义模块_引入模块_import_diy
本文介绍了 Python 中模块的导入与自定义模块的创建。首先,我们回忆了模块的概念,即封装好功能的部件,并通过导入 `__hello__` 模块实现了输出 "hello world!" 的功能。接着,尝试创建并编辑自己的模块 `my_file.py`,引入 `time` 模块以获取当前时间,并在其中添加自定义输出。
20 4
|
3月前
|
Python
Python Internet 模块
Python Internet 模块。
139 74
|
2月前
|
存储 NoSQL 数据库连接
在Python程序中实现LevelDB的海量key的分批次扫描
通过本文的步骤,您可以在Python程序中实现对LevelDB海量key的分批次扫描。这样不仅能够有效地管理大规模数据,还可以避免一次性加载过多数据到内存中,提高程序的性能和稳定性。希望这篇指南能为您的开发工作提供实用的帮助。
83 28
|
2月前
|
Python
[oeasy]python057_如何删除print函数_dunder_builtins_系统内建模块
本文介绍了如何删除Python中的`print`函数,并探讨了系统内建模块`__builtins__`的作用。主要内容包括: 1. **回忆上次内容**:上次提到使用下划线避免命名冲突。 2. **双下划线变量**:解释了双下划线(如`__name__`、`__doc__`、`__builtins__`)是系统定义的标识符,具有特殊含义。
40 3
|
3月前
|
安全 API C语言
Python程序的安全逆向(关于我的OPENAI的APIkey是如何被盗的)
本文介绍了如何使用C语言编写一个简单的文件加解密程序,并讨论了如何为编译后的软件添加图标。此外,文章还探讨了Python的.pyc、.pyd等文件的原理,以及如何生成和使用.pyd文件来增强代码的安全性。通过视频和教程,作者详细讲解了生成.pyd文件的过程,并分享了逆向分析.pyd文件的方法。最后,文章提到可以通过定制Python解释器来进一步保护源代码。
96 6
|
3月前
|
Shell 开发工具 Python
如何在vim里直接运行python程序
如何在vim里直接运行python程序
|
9月前
|
Go Python
使用python实现一个用户态协程
【6月更文挑战第28天】本文探讨了如何在Python中实现类似Golang中协程(goroutines)和通道(channels)的概念。文章最后提到了`wait_for`函数在处理超时和取消操作中的作
79 1
使用python实现一个用户态协程
|
6月前
|
调度 Python
python3 协程实战(python3经典编程案例)
该文章通过多个实战案例介绍了如何在Python3中使用协程来提高I/O密集型应用的性能,利用asyncio库以及async/await语法来编写高效的异步代码。
59 0
|
8月前
|
数据库 开发者 Python
实战指南:用Python协程与异步函数优化高性能Web应用
【7月更文挑战第15天】Python的协程与异步函数优化Web性能,通过非阻塞I/O提升并发处理能力。使用aiohttp库构建异步服务器,示例代码展示如何处理GET请求。异步处理减少资源消耗,提高响应速度和吞吐量,适用于高并发场景。掌握这项技术对提升Web应用性能至关重要。
116 10

热门文章

最新文章