Python异步: 什么是异步? (2)

简介: 广义上,asyncio 是指使用协程在 Python 中实现异步编程的能力。

具体来说,它指的是两个要素:

  1. 在 Python 3.4 中将“asyncio”模块添加到 Python 标准库中。
  2. 在 Python 3.5 中向 Python 语言添加了 async/await 表达式。

模块和语言的变化共同促进了支持基于协程的并发、非阻塞 I/O 和异步编程的 Python 程序的开发。

让我们仔细看看 asyncio 的这两个方面,从语言的变化开始。

1. 异步支持

Python 语言已更改为通过添加表达式和类型来适应 asyncio。更具体地说,它被更改为支持协程作为一流的概念。反过来,协程是 asyncio 程序中使用的并发单元。协程是一个可以挂起和恢复的函数。

协程可以通过“async def”表达式定义。它可以接受参数并返回一个值,就像函数一样。

# define a coroutine
async def custom_coro():
    # ...

调用协程函数会创建一个协程对象,这是一个新的类。它不执行协程函数。

...
# create a coroutine object
coro = custom_coro()

协程可以通过 await 表达式执行另一个协程。这会暂停调用者并安排目标执行。

...
# suspend and schedule the target
await custom_coro()

异步迭代器是产生可等待对象的迭代器。可以使用“async for”表达式遍历异步迭代器。

...
# traverse an asynchronous iterator
async for item in async_iterator:
    print(item)

这不会并行执行 for 循环。相反,执行 for 循环的调用协程将挂起并在内部等待迭代器产生的每个可等待对象。

异步上下文管理器是可以等待进入和退出方法的上下文管理器。“async with”表达式用于创建和使用异步上下文管理器。调用协程将在进入上下文管理器块之前挂起并等待上下文管理器,在离开上下文管理器块时也是如此。

这些是为支持协程而对 Python 语言进行的主要更改的总结。

2. 异步模块

“asyncio”模块提供函数和对象,用于使用异步编程范例开发基于协程的程序。具体来说,它支持带有子进程(用于执行命令)和流(用于 TCP 套接字编程)的非阻塞 I/O。

asyncio 模块的核心是事件循环。这是运行基于协程的程序并实现协程之间协作多任务处理的机制。该模块同时提供高级和低级 API。高级 API 是为我们 Python 应用程序开发人员准备的。在大多数情况下,低级 API 适用于框架开发人员,而不是我们。大多数用例都可以使用高级 API 来满足,这些 API 提供实用程序来处理协程、流、同步原语、子进程和队列,以便在协程之间共享数据。较低级别的 API 为高级 API 提供了基础,包括事件循环的内部结构、传输协议、策略等。

现在我们大致了解了 asyncio 是什么,它用于异步编程。

相关文章
|
4天前
|
数据采集 Java Python
python并发编程:Python异步IO实现并发爬虫
python并发编程:Python异步IO实现并发爬虫
24 1
|
4天前
|
算法 数据处理 Python
Python并发编程:解密异步IO与多线程
本文将深入探讨Python中的并发编程技术,重点介绍异步IO和多线程两种常见的并发模型。通过对比它们的特点、适用场景和实现方式,帮助读者更好地理解并发编程的核心概念,并掌握在不同场景下选择合适的并发模型的方法。
|
4天前
|
调度 数据库 Python
【专栏】异步IO在处理IO密集型任务中的高效性
【4月更文挑战第27天】本文介绍了Python并发编程和异步IO,包括并发的基本概念(多线程、多进程、协程),线程与进程的实现(threading和multiprocessing模块),协程的使用(asyncio模块),以及异步IO的原理和优势。强调了异步IO在处理IO密集型任务中的高效性,指出应根据任务类型选择合适的并发技术。
|
4天前
|
数据采集 数据挖掘 调度
异步爬虫实践攻略:利用Python Aiohttp框架实现高效数据抓取
本文介绍了如何使用Python的Aiohttp框架构建异步爬虫,以提升数据抓取效率。异步爬虫利用异步IO和协程技术,在等待响应时执行其他任务,提高效率。Aiohttp是一个高效的异步HTTP客户端/服务器框架,适合构建此类爬虫。文中还展示了如何通过代理访问HTTPS网页的示例代码,并以爬取微信公众号文章为例,说明了实际应用中的步骤。
|
4天前
|
API UED Python
使用Python进行异步HTTP请求的实践指南
使用Python进行异步HTTP请求的实践指南
21 4
|
4天前
|
并行计算 数据处理 开发者
Python并发编程:解析异步IO与多线程
本文探讨了Python中的并发编程技术,着重比较了异步IO和多线程两种常见的并发模型。通过详细分析它们的特点、优劣势以及适用场景,帮助读者更好地理解并选择适合自己项目需求的并发编程方式。
|
4天前
|
人工智能 算法 调度
uvloop,一个强大的 Python 异步IO编程库!
uvloop,一个强大的 Python 异步IO编程库!
37 2
|
4天前
|
API 调度 开发者
Python中的并发编程:使用asyncio库实现异步IO
传统的Python编程模式中,使用多线程或多进程实现并发操作可能存在性能瓶颈和复杂性问题。而随着Python 3.5引入的asyncio库,开发者可以利用异步IO来更高效地处理并发任务。本文将介绍如何利用asyncio库实现异步IO,提升Python程序的并发性能。
|
4天前
|
数据采集 缓存 算法
使用Python打造爬虫程序之Python中的并发与异步IO:解锁高效数据处理之道
【4月更文挑战第19天】本文探讨了Python中的并发与异步IO,区分了并发(同时处理任务)与并行(同时执行任务)的概念。Python的多线程受限于GIL,适合IO密集型任务,而多进程适用于CPU密集型任务。异步IO通过非阻塞和回调/协程实现高效IO,Python的asyncio库提供了支持。应用场景包括Web开发和网络爬虫等。实践指南包括理解任务类型、使用asyncio、避免阻塞操作、合理设置并发度和优化性能。理解并运用这些技术能提升Python程序的效率和性能。
|
4天前
|
开发者 Python
Python中的并发编程:使用asyncio模块实现异步任务
传统的Python编程中,使用多线程或多进程进行并发操作时,常常会面临性能瓶颈和资源竞争的问题。而随着Python 3.5版本的引入,asyncio模块为开发者提供了一种基于协程的异步编程方式。本文将介绍如何使用asyncio模块实现异步任务,提高Python程序的并发处理能力。