线程,进程,协程

简介: 线程,进程,协程

线程,进程,协程


1.1 进程


进程:是CPU对程序的一次执行过程、一次执行任务。虚拟的地址空间、可执行的代码、操作系统的接口、安全的上下文(记录启动该进程的用户和权限等等)、唯一的进程ID、环境变量、优先级类、最小和最大的工作空间(内存空间),是支配线程的最小单位。一个程序可以有多个进程。


1.2 线程


线程:是进程中执行运算的最小单位,是进程中的一个实体。一个标准的线程由线程ID,当前指令指针(PC),寄存器集合和堆栈组成。一个程序至少有一个进程,一个进程至少有一个线程。操作系统分配CPU的基本单位。线程也是executed content(执行上下文), cpu执行所需要的指令。cpu不断进行交换进行任务并且制造出看似并发进行的任务,线程不断切换所需要的信息都存储在executed content。


1.3 携程


协程:比线程更小的执行单元,又称微线程,在单线程上执行多个任务,自带CPU上下文

用函数切换,开销极小。不通过操作系统调度,

没有进程、线程的切换开销。(gevent,monkey.patchall)


小结


一个程序跑起来至少有一个进程,有独立的内存空间,数据栈。每个进程中至少有一个主线程负责程序的逻辑执行。


一个程序中有多个任务在处理不同的事情,每个事情都可以安排一个线程进行处理,负责到底。

协程是一种各司其职的,有分工的线程,他们处理特定的事情完成后交给其他协程


想要使用协程,那么我们的任务必须有等待。当我们要完成的任务有耗时任务,属于IO密集型任务时,我们使用协程来执行任务会节省很多的资源。


线程和进程的区别


1.同一个进程中的线程共享同一内存空间,但进程之间的内存空间是独立的。


2.同一个进程中的所有线程的数据是共享的,但进程之间的数据是独立的。


3.对主线程的修改可能会影响其他线程的行为,但是父进程的修改(除了删除以外)不会影响其他子进程。


4.线程是一个上下文的执行指令,而进程则是与运算相关的一簇资源。


5.同一进程的线程之间可以相互通信,不同进程不能直接通信,需要借助管道


6.创建一个线程的开销小,创建一个进程需要对父进程进行一次复制


7.同一个进程之中,线程可以相互操作,可以进行平级操作。进程只能操作其子进程


8.线程启动速度块,进程启动速度慢


1.4线程安全


多线程环境中,共享数据同一时间只能有一个线程来操作。


1.5原子操作


原子操作就是不会因为进程并发或者线程并发而导致被中断的操作


1.6并行和并发


  1. 1.并行:多个CPU核心,不同的程序就分配给不同的CPU来运行。可以让多个程序同时执行。(多进程)

  2. 2.并发:单个CPU核心,在一个时间切片里一次只能运行一个程序,如果需要运行多个程序,则串行执行,遇到IO阻塞就切换,即计算机在逻辑上能处理多任务的能力。(多进程,多线程)

1.7多线程, 多进程场景


多进程:密集CPU任务,需要充分使用多核CPU资源(服务器,大量的并行计算)的时候,用多进程。 multiprocessing


缺陷:多个进程之间通信成本高,切换开销大。


多线程:密集I/O任务(网络I/O,磁盘I/O,数据库I/O)使用多线程合适。

threading.Thread、multiprocessing.dummy


缺陷:同一个时间切片只能运行一个线程,不能做到高并行,但是可以做到高并发。


1.8互斥锁、递归锁、升序锁


GIL保证原子操作线程安全


1.互斥锁,互斥锁是用来解决IO密集型场景产生的计算错误,即目的是为了保护共享的数据,同一时间只能有一个线程来修改共享的数据。


2. 递归锁:锁中套了一把锁


3. 升序锁:解决了死锁的问题,给每个锁分配一个id,按照升序的方式让线程按顺序使用多个锁


1.9进程间通讯


1Queue: multiprocessing 中的Queue模块,通过queue.get(), queue.put()


2 Manager: mutiprocessing 中的Manager模块,

manager = Manager()
pname = current_process().name
pid = current_process().pid
print('当前进程是{}_{}'.format(pid, pname))
print(m_dict)
m_dict[pid] = pname
m_list.append(pid)
  1. 3.**进程池:**维护一个进程list, 当有空闲的进程可用的时候就获取,没有可用的时候程序就必须等待直到有可用进程。进程池有同步(appy)和异步(apply_async)
pool = Pool(3)#定义进程池中进程数量
pool.apply_async(func, args=(,), callback=)#当func执行完之后自动执行callback方法
pool.close()
pool.join()

2.0死锁


迭代死锁:该情况是一个线程“迭代”请求同一个资源,直接就会造成死锁。这种死锁产生的原因是我们标准互斥锁threading.Lock的缺点导致的。


标准的锁对象(threading.Lock)并不关心当前是哪个线程占有了该锁;如果该锁已经被占有了,那么任何其它尝试获取该锁的线程都会被阻塞,包括已经占有该锁的线程也会被阻塞。


互相等待死锁:两个进程想要获得的锁已经被对方进程获得,只能互相等待无法释放的锁。


2.1协程的条件


1.必须在只有一个单线程里实现并发


2.修改共享数据不需加锁


3.用户程序里自己保存多个控制流的上下文栈


4.一个协程遇到IO操作自动切换到其它协程


相关文章
|
15天前
|
并行计算 数据处理 调度
Python中的并发编程:探索多线程与多进程的奥秘####
本文深入探讨了Python中并发编程的两种主要方式——多线程与多进程,通过对比分析它们的工作原理、适用场景及性能差异,揭示了在不同应用需求下如何合理选择并发模型。文章首先简述了并发编程的基本概念,随后详细阐述了Python中多线程与多进程的实现机制,包括GIL(全局解释器锁)对多线程的影响以及多进程的独立内存空间特性。最后,通过实例演示了如何在Python项目中有效利用多线程和多进程提升程序性能。 ####
|
19天前
|
Linux 调度 C语言
深入理解操作系统:进程和线程的管理
【10月更文挑战第32天】本文旨在通过浅显易懂的语言和实际代码示例,带领读者探索操作系统中进程与线程的奥秘。我们将从基础知识出发,逐步深入到它们在操作系统中的实现和管理机制,最终通过实践加深对这一核心概念的理解。无论你是编程新手还是希望复习相关知识的资深开发者,这篇文章都将为你提供有价值的见解。
|
17天前
|
Java
java小知识—进程和线程
进程 进程是程序的一次执行过程,是系统运行的基本单位,因此进程是动态的。系统运行一个程序即是一个进程从创建,运行到消亡的过程。简单来说,一个进程就是一个执行中的程序,它在计算机中一个指令接着一个指令地执行着,同时,每个进程还占有某些系统资源如CPU时间,内存空间,文件,文件,输入输出设备的使用权等等。换句话说,当程序在执行时,将会被操作系统载入内存中。 线程 线程,与进程相似,但线程是一个比进程更小的执行单位。一个进程在其执行的过程中产生多个线程。与进程不同的是同类的多个线程共享同一块内存空间和一组系统资源,所以系统在产生一个线程,或是在各个线程之间做切换工作时,负担要比
24 1
|
22天前
深入理解操作系统:进程与线程的管理
【10月更文挑战第30天】操作系统是计算机系统的核心,它负责管理计算机硬件资源,为应用程序提供基础服务。本文将深入探讨操作系统中进程和线程的概念、区别以及它们在资源管理中的作用。通过本文的学习,读者将能够更好地理解操作系统的工作原理,并掌握进程和线程的管理技巧。
36 2
|
23天前
|
调度 Python
深入浅出操作系统:进程与线程的奥秘
【10月更文挑战第28天】在数字世界的幕后,操作系统悄无声息地扮演着关键角色。本文将拨开迷雾,深入探讨操作系统中的两个基本概念——进程和线程。我们将通过生动的比喻和直观的解释,揭示它们之间的差异与联系,并展示如何在实际应用中灵活运用这些知识。准备好了吗?让我们开始这段揭秘之旅!
|
2月前
|
Python
Python中的多线程与多进程
本文将探讨Python中多线程和多进程的基本概念、使用场景以及实现方式。通过对比分析,我们将了解何时使用多线程或多进程更为合适,并提供一些实用的代码示例来帮助读者更好地理解这两种并发编程技术。
|
28天前
|
Linux 调度
探索操作系统核心:进程与线程管理
【10月更文挑战第24天】在数字世界的心脏,操作系统扮演着至关重要的角色。它不仅是计算机硬件与软件之间的桥梁,更是管理和调度资源的大管家。本文将深入探讨操作系统的两大基石——进程与线程,揭示它们如何协同工作以确保系统运行得井井有条。通过深入浅出的解释和直观的代码示例,我们将一起解锁操作系统的管理奥秘,理解其对计算任务高效执行的影响。
|
5月前
|
运维 关系型数据库 MySQL
掌握taskset:优化你的Linux进程,提升系统性能
在多核处理器成为现代计算标准的今天,运维人员和性能调优人员面临着如何有效利用这些处理能力的挑战。优化进程运行的位置不仅可以提高性能,还能更好地管理和分配系统资源。 其中,taskset命令是一个强大的工具,它允许管理员将进程绑定到特定的CPU核心,减少上下文切换的开销,从而提升整体效率。
掌握taskset:优化你的Linux进程,提升系统性能
|
5月前
|
弹性计算 Linux 区块链
Linux系统CPU异常占用(minerd 、tplink等挖矿进程)
Linux系统CPU异常占用(minerd 、tplink等挖矿进程)
177 4
Linux系统CPU异常占用(minerd 、tplink等挖矿进程)
|
4月前
|
算法 Linux 调度
探索进程调度:Linux内核中的完全公平调度器
【8月更文挑战第2天】在操作系统的心脏——内核中,进程调度算法扮演着至关重要的角色。本文将深入探讨Linux内核中的完全公平调度器(Completely Fair Scheduler, CFS),一个旨在提供公平时间分配给所有进程的调度器。我们将通过代码示例,理解CFS如何管理运行队列、选择下一个运行进程以及如何对实时负载进行响应。文章将揭示CFS的设计哲学,并展示其如何在现代多任务计算环境中实现高效的资源分配。

热门文章

最新文章

相关实验场景

更多
下一篇
无影云桌面