【Python零基础入门篇 · 36】:greenlet协程模块的使用、gevent模块的使用、程序打补丁、总结

简介: 【Python零基础入门篇 · 36】:greenlet协程模块的使用、gevent模块的使用、程序打补丁、总结

greenlet协程模块的使用


greenlet:是一个用C实现的协程模块,通过switch()来实现任务函数间的切换。


greenlet属于手动切换任务,当遇到IO操作,程序会阻塞,而不能进行自动切换。


greenlet为第三方库模块,需要在Terminal中输入下载命令:pip install greenlet




通过greenlet实现任务切换


导入模块:from greenlet import greenlet


实例化协程对象:greenlet(任务名)


下图代码逻辑:


代码执行到g1.switch()时转换到eat()函数中运行,当执行到g2.switch()时任务切换到study()函数中运行

09bcdce1b69a414798af767bf5557ce4.png




gevent模块的使用



原理是当一个greenlet遇到IO(指的是input output 输入输出,比如网络、文件操作等)操作时,比如访问网络,就自动切换到其他的greenlet,等到IO操作完成,再在适当的时候切换回来继续执行。 由于IO操作非常耗时,经常使程序处于等待状态,有了gevent为我们自动切换协程,就保证总有greenlet在运行,而不是等待IO。


gevent遇到IO操作,会进行自动切换,属于主动式切换。在gevent中用到的主要模式是greenlet


grevent的使用


gevent.spawn(函数名)——创建协程对象


join()——阻塞,等待某个协程执行完毕


joinall(参数)——参数是一个协程对象列表,会等待所有的协程都执行完毕再退出


gevent模块中自带了sleep耗时函数


  • 执行A/B两个任务,当A、B遇到耗时操作,gevent会让A继续执行,同时也开始执行B任务。


  • A完成了耗时操作后,B在对应的时间也完成了耗时操作。


13a4524e64444717bdf58db31d53a24e.png

joinall()的使用

7933533a8196402799a656432aa8c6e7.png





程序打补丁


猴子补丁功能:拥有在模块运行时的替换能力


导入模块:from gevent import monkey


51abaea4433a47719f67284b6151a4ba.png



总结


1、进程是资源分配的基本单位,线程是CPU调度的基本单位。


2、对比


  • 进程:切换需要的资源较大,效率低


  • 线程:切换需要的资源一般,效率一般


  • 协程:切换需要的资源很小,效率高


  • 多线程适合IO密集型操作(读写数据操作多的,比如爬虫等)

多进程适合CPU密集型操作(科学计算、对视频进行高清解码等)

相关文章
|
6天前
|
Go Python
使用python实现一个用户态协程
【6月更文挑战第28天】本文探讨了如何在Python中实现类似Golang中协程(goroutines)和通道(channels)的概念。文章最后提到了`wait_for`函数在处理超时和取消操作中的作
15 1
使用python实现一个用户态协程
|
4天前
|
分布式计算 并行计算 安全
在Python Web开发中,Python的全局解释器锁(Global Interpreter Lock,简称GIL)是一个核心概念,它直接影响了Python程序在多线程环境下的执行效率和性能表现
【6月更文挑战第30天】Python的GIL是CPython中的全局锁,限制了多线程并行执行,尤其是在多核CPU上。GIL确保同一时间仅有一个线程执行Python字节码,导致CPU密集型任务时多线程无法充分利用多核,反而可能因上下文切换降低性能。然而,I/O密集型任务仍能受益于线程交替执行。为利用多核,开发者常选择多进程、异步IO或使用不受GIL限制的Python实现。在Web开发中,理解GIL对于优化并发性能至关重要。
22 0
|
7天前
|
PHP 调度 容器
Swoole 源码分析之 Coroutine 协程模块
协程又称轻量级线程,但与线程不同的是;协程是用户级线程,不需要操作系统参与。由用户显式控制,可以在需要的时候挂起、或恢复执行。
Swoole 源码分析之 Coroutine 协程模块
|
1天前
|
JSON JavaScript 数据格式
|
1天前
|
监控 Python
paramiko 模块 ---Python脚本监控当前系统的CPU、内存、根目录、IP地址等信息
paramiko 模块 ---Python脚本监控当前系统的CPU、内存、根目录、IP地址等信息
|
4天前
|
分布式计算 DataWorks 安全
DataWorks产品使用合集之跑python3脚本,已按照文档安装上模块,提示找不到模块,是什么问题
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。
8 0
|
6天前
|
机器学习/深度学习 人工智能 程序员
探索Python宝库:从基础到技能的干货知识(数据类型与变量+ 条件与循环+函数与模块+文件+异常+OOP)
探索Python宝库:从基础到技能的干货知识(数据类型与变量+ 条件与循环+函数与模块+文件+异常+OOP)
7 0
|
8月前
|
Python
164 python网络编程 - 协程(gevent版)
164 python网络编程 - 协程(gevent版)
43 0
|
调度 开发者 Python
【Python零基础入门篇 · 24】:协程和IO操作的简单理解、greenlet协程模块的使用、gevent模块的使用、程序打补丁、总结
【Python零基础入门篇 · 24】:协程和IO操作的简单理解、greenlet协程模块的使用、gevent模块的使用、程序打补丁、总结
【Python零基础入门篇 · 24】:协程和IO操作的简单理解、greenlet协程模块的使用、gevent模块的使用、程序打补丁、总结
|
Python
5_python高阶_协程—gevent实现多任务(重点)
5_python高阶_协程—gevent实现多任务(重点)
176 0