Python:Flask使用ThreadPoolExecutor执行异步任务

简介: Python:Flask使用ThreadPoolExecutor执行异步任务
# -*- coding: utf-8 -*-
import time
from concurrent.futures import ThreadPoolExecutor
from flask import Flask, request
executor = ThreadPoolExecutor()
app = Flask(__name__)
# 模拟耗时任务
def run_job(name):
    time.sleep(5)
    print('run_job complete', name)
@app.route('/task')
def run_task():
    """
    同步执行
   http://127.0.0.1:5000/task
    """
    name = request.args.get('name')
    run_job(name=name)
    return {'ret': 'ok'}
@app.route('/async_task')
def run_async_task():
    """
    异步执行
   http://127.0.0.1:5000/async_task
    """
    name = request.args.get('name')
    executor.submit(run_job, name=name)
    return {'ret': 'ok'}
if __name__ == '__main__':
    app.run(debug=True)

apache2-utils压力测试工具测试:


# 使用说明:
$ ab -n 请求数 -c 并发数  URL
# 同步执行任务
$ ab -n 100 -c 10 http://127.0.0.1:5000/task
Time taken for tests:   55.100 seconds
# 异步执行任务
$ ab -n 100 -c 10 http://127.0.0.1:5000/async_task
Time taken for tests:   0.097 seconds
相关文章
|
7月前
|
数据采集 存储 JSON
Python爬取知乎评论:多线程与异步爬虫的性能优化
Python爬取知乎评论:多线程与异步爬虫的性能优化
|
7月前
|
数据采集 存储 C++
Python异步爬虫(aiohttp)加速微信公众号图片下载
Python异步爬虫(aiohttp)加速微信公众号图片下载
|
7月前
|
数据采集 监控 调度
干货分享“用 多线程 爬取数据”:单线程 + 协程的效率反超 3 倍,这才是 Python 异步的正确打开方式
在 Python 爬虫中,多线程因 GIL 和切换开销效率低下,而协程通过用户态调度实现高并发,大幅提升爬取效率。本文详解协程原理、实战对比多线程性能,并提供最佳实践,助你掌握异步爬虫核心技术。
|
JSON 前端开发 API
使用Python和Flask构建简易Web API
使用Python和Flask构建简易Web API
758 86
|
人工智能 开发者 Python
Chainlit:一个开源的异步Python框架,快速构建生产级对话式 AI 应用
Chainlit 是一个开源的异步 Python 框架,帮助开发者在几分钟内构建可扩展的对话式 AI 或代理应用,支持多种工具和服务集成。
1471 9
|
Python
深入理解 Python 中的异步操作:async 和 await
Python 的异步编程通过 `async` 和 `await` 关键字处理 I/O 密集型任务,如网络请求和文件读写,显著提高性能。`async` 定义异步函数,返回 awaitable 对象;`await` 用于等待这些对象完成。本文介绍异步编程基础、`async` 和 `await` 的用法、常见模式(并发任务、异常处理、异步上下文管理器)及实战案例(如使用 aiohttp 进行异步网络请求),帮助你高效利用系统资源并提升程序性能。
1274 7
|
SQL 网络协议 安全
Python异步: 什么时候使用异步?
Asyncio 是 Python 中用于异步编程的库,适用于协程、非阻塞 I/O 和异步任务。使用 Asyncio 的原因包括:1) 使用协程实现轻量级并发;2) 采用异步编程范式提高效率;3) 实现非阻塞 I/O 提升 I/O 密集型应用性能。然而,Asyncio 并不适合所有场景,特别是在 CPU 密集型任务或已有线程/进程方案的情况下。选择 Asyncio 应基于项目需求和技术优势。
214 2
|
数据采集 JSON 测试技术
Grequests,非常 Nice 的 Python 异步 HTTP 请求神器
在Python开发中,处理HTTP请求至关重要。`grequests`库基于`requests`,支持异步请求,通过`gevent`实现并发,提高性能。本文介绍了`grequests`的安装、基本与高级功能,如GET/POST请求、并发控制等,并探讨其在实际项目中的应用。
294 3
|
JSON API 数据格式
使用Python和Flask构建简单的Web API
使用Python和Flask构建简单的Web API
|
开发框架 前端开发 JavaScript
利用Python和Flask构建轻量级Web应用的实战指南
利用Python和Flask构建轻量级Web应用的实战指南
884 2

推荐镜像

更多