Python多进程及多线程基础

简介: Python多进程及多线程基础

关于进程和线程的基础知识,之前已经分享过一些文章,下面把一些基础知识,再总结下(重点:面试常问):

  • 启动一个程序,就默认创建一个主进程,在一个主进程中默认创建一个主线程
  • 进程是系统资源分配和调度的基本单位,线程存在于进程中,线程是CPU调度和分配的基本单位。
  • 进程之间相互独立,同一个变量,多进程中各自会拷贝一份,而同一个进程的多个线程是共享内存的,所有变量都由所有线程共享,从而提升程序的运行效率。
  • 进程之间相互独立,一个进程的崩溃不会影响其他进程,而线程包含在进程之中,如果线程崩溃,则会导致其他线程崩溃,当然也会导致该进程崩溃。所以多进程开发模式要比多线程模式健壮性要强。

进程的运行状态

img

1)新建状态:该进程正在被创建,尚未转到就绪状态。

2)就绪状态:所有运行条件都已满足,正在等待CPU。

3)运行状态(执行窗台):进程正在处理器上运行。

4)阻塞状态:进程正在等待某一事件而暂停运行。如等待可用资源或等待输入输出完成。即使处理器空闲,该进程也不能运行。

5)死亡状态:进程正在从系统中消失。

进程的三个基本状态是可以相互转换的

就绪——>运行:当进程获得处理器时,由就绪状态转为运行状态。

运行——>就绪:当进程被剥夺处理器时,如用完系统分配给他的时间片,出现更高级别的其它进程,进程由运行状态转为就绪状态。

运行——>阻塞:当运行进程因某事件受阻,如所申请资源被占用,启动I/O传输未完成,进程由运行状态转为阻塞状态。

阻塞——>就绪:当所等待事件发生,如得到申请资源,I/O传输完成,进程由阻塞变为就绪状态

Python中如何使用多进程

Python中使用multiprocessing模块创建进程

multiprocessing模块提供了一个Process类创建进程对象。

Process([group] ,[target], [ name ],[args], [ kwargs])

group:指定进程组,大多数情况下用不到,一般情况下group只能赋值为None

target:如果传递了函数的引用,可以任务这个子进程就执行这里的代码,target=函数名,函数名不能带括号

args:给target指定的函数传递的参数,以元组的方式传递。args=(5,),只有一个参数的话,要加个逗号才能表示元组

kwargs:给target指定的函数传递命名参数,一般是以字典的形式传递,kwargs={"形参1":“实参1”,“形参2”:“实参2”}

name:给进程设定一个名字,可以不设定

Process创建的实例对象的常用方法

  • start():启动子进程实例(创建子进程)
  • is_alive():判断进程子进程是否还在活着
  • join([timeout]):是否等待子进程执行结束,或等待多少秒
  • terminate():不管任务是否完成,立即终止子进程。
  • name:当前进程实例别名,默认Process-N,N从1开始递增。
  • pid:当前进程实例的PID值。

使用Process类来创建一个多进程

#导入多进程模块

import  multiprocessing

import os

def target_func():

 print("子进程名字",multiprocessing.current_process().name)

 print("子进程PID:",os.getpid())

 print("子进程的父进程ppid:",os.getppid())

 

if __name__ == '__main__':

 

 for i in range(3):

        # 创建进程实例,指定要执行的目标函数

        p = multiprocessing.Process(target=target_func)

        p.start()#使用start方法启动进程

        p.join()#等待子进程结束

 print("主进程pid:",os.getpid())

 输出:

子进程名字 Process-1

子进程PID:3708

子进程的父进程ppid: 4256

主进程pid:4256

子进程名字 Process-2

子进程PID:8460

子进程的父进程ppid: 4256

主进程pid:4256

子进程名字 Process-3

子进程PID:4468

子进程的父进程ppid: 4256

主进程pid:4256

Python中如何使用多线程

在python中,使用threading模块来进行程序的多线程操作。threading模块提供了一个Thread类创建线程。

1.target是线程执行函数的名字,函数的名字后面不要带有小括号。

 

2.args:执行函数所需要的参数,这个参数要以元组的形式去传,如果只有一个元素,后面不要忘了逗号。

 

3.kwargs:执行函数所需要的参数, 这个参数要以字典方式去传

 

Thread类提供了以下方法:

run(): 用以表示线程活动的方法。

start():启动线程活动。

join([time]): 等待至线程中止,直至启动的线程终止之前一直挂起;除非给出了timeout(秒),否则会一直阻塞。

isAlive(): 返回线程是否活动的。

getName(): 返回线程名。

setName(): 设置线程名。

 

threading常用方法及属性:

threading.currentThread(): 返回当前的线程变量。

threading.enumerate(): 返回一个包含正在运行的线程的list。正在运行指线程启动后、结束前,不包括启动前和终止后的线程。

threading.activeCount(): 返回当前活跃的线程数,1个主线程+n个子线程。

多线程简单使用

import threading #导入多线程模块

 

def eat():

 print('正在吃饭')

 print('线程名称 %s'%threading.current_thread().name)

def dance():

 print('正在跳舞')

 print('线程名称 %s'%threading.current_thread().name)

def song():

 print('正在唱歌')

 print('线程名称 %s'%threading.current_thread().name)

 

if __name__ == '__main__':

 

    thread = [] #定义空列表用来保存线程

    t1 = threading.Thread(target=eat,args=('')) #定义第一条线程

    t2 = threading.Thread(target=dance,args=('')) #定义第二条线程

    t3 = threading.Thread(target=song,args=('')) #定义第三条线程

    thread.append(t1) #将线程依次加入到列表中

    thread.append(t2)

    thread.append(t3)

 for i in thread:

        i.start() #依次启动所有线程

 for i in thread:

        i.join()  #守护所有线程

 

输出:

正在吃饭

线程名称 Thread-1

正在跳舞

线程名称 Thread-2

正在唱歌

线程名称 Thread-3

python多进程多线程的知识,就到这里了,给大家推荐一下Python新手入门的课程,

希望对大家有用。

目录
相关文章
|
4天前
|
并行计算 数据处理 调度
Python中的并发编程:探索多线程与多进程的奥秘####
本文深入探讨了Python中并发编程的两种主要方式——多线程与多进程,通过对比分析它们的工作原理、适用场景及性能差异,揭示了在不同应用需求下如何合理选择并发模型。文章首先简述了并发编程的基本概念,随后详细阐述了Python中多线程与多进程的实现机制,包括GIL(全局解释器锁)对多线程的影响以及多进程的独立内存空间特性。最后,通过实例演示了如何在Python项目中有效利用多线程和多进程提升程序性能。 ####
|
8天前
|
Linux 调度 C语言
深入理解操作系统:进程和线程的管理
【10月更文挑战第32天】本文旨在通过浅显易懂的语言和实际代码示例,带领读者探索操作系统中进程与线程的奥秘。我们将从基础知识出发,逐步深入到它们在操作系统中的实现和管理机制,最终通过实践加深对这一核心概念的理解。无论你是编程新手还是希望复习相关知识的资深开发者,这篇文章都将为你提供有价值的见解。
|
5天前
|
Java
java小知识—进程和线程
进程 进程是程序的一次执行过程,是系统运行的基本单位,因此进程是动态的。系统运行一个程序即是一个进程从创建,运行到消亡的过程。简单来说,一个进程就是一个执行中的程序,它在计算机中一个指令接着一个指令地执行着,同时,每个进程还占有某些系统资源如CPU时间,内存空间,文件,文件,输入输出设备的使用权等等。换句话说,当程序在执行时,将会被操作系统载入内存中。 线程 线程,与进程相似,但线程是一个比进程更小的执行单位。一个进程在其执行的过程中产生多个线程。与进程不同的是同类的多个线程共享同一块内存空间和一组系统资源,所以系统在产生一个线程,或是在各个线程之间做切换工作时,负担要比
14 1
|
11天前
深入理解操作系统:进程与线程的管理
【10月更文挑战第30天】操作系统是计算机系统的核心,它负责管理计算机硬件资源,为应用程序提供基础服务。本文将深入探讨操作系统中进程和线程的概念、区别以及它们在资源管理中的作用。通过本文的学习,读者将能够更好地理解操作系统的工作原理,并掌握进程和线程的管理技巧。
24 2
|
12天前
|
调度 Python
深入浅出操作系统:进程与线程的奥秘
【10月更文挑战第28天】在数字世界的幕后,操作系统悄无声息地扮演着关键角色。本文将拨开迷雾,深入探讨操作系统中的两个基本概念——进程和线程。我们将通过生动的比喻和直观的解释,揭示它们之间的差异与联系,并展示如何在实际应用中灵活运用这些知识。准备好了吗?让我们开始这段揭秘之旅!
|
16天前
|
Java Unix 调度
python多线程!
本文介绍了线程的基本概念、多线程技术、线程的创建与管理、线程间的通信与同步机制,以及线程池和队列模块的使用。文章详细讲解了如何使用 `_thread` 和 `threading` 模块创建和管理线程,介绍了线程锁 `Lock` 的作用和使用方法,解决了多线程环境下的数据共享问题。此外,还介绍了 `Timer` 定时器和 `ThreadPoolExecutor` 线程池的使用,最后通过一个具体的案例展示了如何使用多线程爬取电影票房数据。文章还对比了进程和线程的优缺点,并讨论了计算密集型和IO密集型任务的适用场景。
37 4
|
16天前
|
调度 iOS开发 MacOS
python多进程一文够了!!!
本文介绍了高效编程中的多任务原理及其在Python中的实现。主要内容包括多任务的概念、单核和多核CPU的多任务实现、并发与并行的区别、多任务的实现方式(多进程、多线程、协程等)。详细讲解了进程的概念、使用方法、全局变量在多个子进程中的共享问题、启动大量子进程的方法、进程间通信(队列、字典、列表共享)、生产者消费者模型的实现,以及一个实际案例——抓取斗图网站的图片。通过这些内容,读者可以深入理解多任务编程的原理和实践技巧。
37 1
|
17天前
|
Linux 调度
探索操作系统核心:进程与线程管理
【10月更文挑战第24天】在数字世界的心脏,操作系统扮演着至关重要的角色。它不仅是计算机硬件与软件之间的桥梁,更是管理和调度资源的大管家。本文将深入探讨操作系统的两大基石——进程与线程,揭示它们如何协同工作以确保系统运行得井井有条。通过深入浅出的解释和直观的代码示例,我们将一起解锁操作系统的管理奥秘,理解其对计算任务高效执行的影响。
|
4月前
|
运维 关系型数据库 MySQL
掌握taskset:优化你的Linux进程,提升系统性能
在多核处理器成为现代计算标准的今天,运维人员和性能调优人员面临着如何有效利用这些处理能力的挑战。优化进程运行的位置不仅可以提高性能,还能更好地管理和分配系统资源。 其中,taskset命令是一个强大的工具,它允许管理员将进程绑定到特定的CPU核心,减少上下文切换的开销,从而提升整体效率。
掌握taskset:优化你的Linux进程,提升系统性能
|
4月前
|
弹性计算 Linux 区块链
Linux系统CPU异常占用(minerd 、tplink等挖矿进程)
Linux系统CPU异常占用(minerd 、tplink等挖矿进程)
160 4
Linux系统CPU异常占用(minerd 、tplink等挖矿进程)