聊聊python多线程与多进程

简介: 为什么要使用多进程与多线程呢?因为我们如果按照流程一步步执行任务实在是太慢了,假如一个任务就是10秒,两个任务就是20秒,那100个任务呢?况且cpu这么贵,时间长了就是浪费生命啊!一个任务比喻成一个人,别个做高铁,你做绿皮火车,可想而知!接下来我们先看个例子:

为什么要使用多进程与多线程呢?

因为我们如果按照流程一步步执行任务实在是太慢了,假如一个任务就是10秒,两个任务就是20秒,那100个任务呢?况且cpu这么贵,时间长了就是浪费生命啊!一个任务比喻成一个人,别个做高铁,你做绿皮火车,可想而知!接下来我们先看个例子:

from random import randint
from time import sleep,time
def download_task(file_name):
    print('begin download file %s' %file_name)
    spend_time=randint(5,10)
    sleep(spend_time)
    print('%s finish download spend time %d sencond' %(file_name,spend_time))
def main():
    start=time()
    dowload_task('1.txt')
    dowload_task('2.txt')
    end=time()
    print('total time %.2f' %(end-start))
if __name__=='__main__':
    main()

执行结果如下图:

都花费13s了。。。。。。。。,大无语好吧!

多进程

from multiprocessing import Process
from random import randint
from os import getpid
from time import time,sleep
def download_task(file_name):
    print('begin download file %s' %file_name)
    
    spend_time=randint(5,10)
    sleep(spend_time)
    print('%s finish download spend time %d sencond' %(file_name,spend_time))
def main():
    start=time()
    dowload_task('1.txt')
    dowload_task('2.txt')
    end=time()
    print('total time %.2f' %(end-start))
if __name__=='__main__':
    main()

执行结果如下:

上面的代码就是通过Process类创建的进程对象,通过target参数传递一个需执行的函数,args是要传入的传输,它是一个组。后面通过start()来启动函数,join()等待函数结束,我们可以从出时间减少了很多,最后的时间不在是两个任务依次执行的综合了!

多线程

# /usr/bin/python3
from random import randint
from threading import Thread
from time import time, sleep
from os import getpid
def dowload_task(file_name):
    print("开始下载%s" % file_name)
    print("进程id %d" % getpid())
    spend_time = randint(5, 10)
    sleep(spend_time)
    print("%s下载完成,耗费%ds" % (file_name, spend_time))
def main():
    start = time()
    p1 = Thread(target=dowload_task, args=("1.txt",))
    p1.start()
    p2 = Thread(target=dowload_task, args=("2.txt",))
    p2.start()
    p1.join()
    p2.join()
    end = time()
    print("总共花费%ss" % (end - start))
if __name__ == "__main__":
    main()

执行结果

用class方式

# /usr/bin/python3
from random import randint
from threading import Thread
from time import time, sleep
from os import getpid
class Down_task(Thread):
    def __init__(self, file_name):
        super().__init__()
        self._file_name = file_name
    def run(self):
        print("开始下载%s" % self._file_name)
        print("进程id %d" % getpid())
        spend_time = randint(5, 10)
        sleep(spend_time)
        print("%s下载完成,耗费%ds" % (self._file_name, spend_time))
def main():
    start = time()
    p1 = Down_task(
        "1.txt",
    )
    p1.start()
    p2 = Down_task(
        "2.txt",
    )
    p2.start()
    p1.join()
    p2.join()
    end = time()
    print("总共花费%ss" % (end - start))
if __name__ == "__main__":
    main()

执行结果:

问题:

  1. 那你们知道进程与线程区别吗?
  2. 什么时候用线程什么时候用进程?
  3. 线程在做计算任务时,需要注意什么呢?
相关文章
|
1月前
|
调度 开发者 Python
深入浅出操作系统:进程与线程的奥秘
在数字世界的底层,操作系统扮演着不可或缺的角色。它如同一位高效的管家,协调和控制着计算机硬件与软件资源。本文将拨开迷雾,深入探索操作系统中两个核心概念——进程与线程。我们将从它们的诞生谈起,逐步剖析它们的本质、区别以及如何影响我们日常使用的应用程序性能。通过简单的比喻,我们将理解这些看似抽象的概念,并学会如何在编程实践中高效利用进程与线程。准备好跟随我一起,揭开操作系统的神秘面纱,让我们的代码运行得更加流畅吧!
|
1月前
|
消息中间件 Unix Linux
【C语言】进程和线程详解
在现代操作系统中,进程和线程是实现并发执行的两种主要方式。理解它们的区别和各自的应用场景对于编写高效的并发程序至关重要。
58 6
|
1月前
|
调度 开发者
深入理解:进程与线程的本质差异
在操作系统和计算机编程领域,进程和线程是两个核心概念。它们在程序执行和资源管理中扮演着至关重要的角色。本文将深入探讨进程与线程的区别,并分析它们在现代软件开发中的应用和重要性。
61 5
|
1月前
|
算法 调度 开发者
深入理解操作系统:进程与线程的管理
在数字世界的复杂编织中,操作系统如同一位精明的指挥家,协调着每一个音符的奏响。本篇文章将带领读者穿越操作系统的幕后,探索进程与线程管理的奥秘。从进程的诞生到线程的舞蹈,我们将一起见证这场微观世界的华丽变奏。通过深入浅出的解释和生动的比喻,本文旨在揭示操作系统如何高效地处理多任务,确保系统的稳定性和效率。让我们一起跟随代码的步伐,走进操作系统的内心世界。
|
1月前
|
调度 开发者
核心概念解析:进程与线程的对比分析
在操作系统和计算机编程领域,进程和线程是两个基本而核心的概念。它们是程序执行和资源管理的基础,但它们之间存在显著的差异。本文将深入探讨进程与线程的区别,并分析它们在现代软件开发中的应用和重要性。
57 4
|
2月前
|
数据采集 存储 数据处理
Python中的多线程编程及其在数据处理中的应用
本文深入探讨了Python中多线程编程的概念、原理和实现方法,并详细介绍了其在数据处理领域的应用。通过对比单线程与多线程的性能差异,展示了多线程编程在提升程序运行效率方面的显著优势。文章还提供了实际案例,帮助读者更好地理解和掌握多线程编程技术。
|
2月前
|
并行计算 数据处理 调度
Python中的并发编程:探索多线程与多进程的奥秘####
本文深入探讨了Python中并发编程的两种主要方式——多线程与多进程,通过对比分析它们的工作原理、适用场景及性能差异,揭示了在不同应用需求下如何合理选择并发模型。文章首先简述了并发编程的基本概念,随后详细阐述了Python中多线程与多进程的实现机制,包括GIL(全局解释器锁)对多线程的影响以及多进程的独立内存空间特性。最后,通过实例演示了如何在Python项目中有效利用多线程和多进程提升程序性能。 ####
|
2月前
|
监控 JavaScript 前端开发
python中的线程和进程(一文带你了解)
欢迎来到瑞雨溪的博客,这里是一位热爱JavaScript和Vue的大一学生分享技术心得的地方。如果你从我的文章中有所收获,欢迎关注我,我将持续更新更多优质内容,你的支持是我前进的动力!🎉🎉🎉
30 0
|
2月前
|
数据采集 Java Python
爬取小说资源的Python实践:从单线程到多线程的效率飞跃
本文介绍了一种使用Python从笔趣阁网站爬取小说内容的方法,并通过引入多线程技术大幅提高了下载效率。文章首先概述了环境准备,包括所需安装的库,然后详细描述了爬虫程序的设计与实现过程,包括发送HTTP请求、解析HTML文档、提取章节链接及多线程下载等步骤。最后,强调了性能优化的重要性,并提醒读者遵守相关法律法规。
70 0
|
6月前
|
运维 关系型数据库 MySQL
掌握taskset:优化你的Linux进程,提升系统性能
在多核处理器成为现代计算标准的今天,运维人员和性能调优人员面临着如何有效利用这些处理能力的挑战。优化进程运行的位置不仅可以提高性能,还能更好地管理和分配系统资源。 其中,taskset命令是一个强大的工具,它允许管理员将进程绑定到特定的CPU核心,减少上下文切换的开销,从而提升整体效率。
掌握taskset:优化你的Linux进程,提升系统性能