线程,进程,协程

简介: 线程,进程,协程

线程,进程,协程


1.1 进程


进程:是CPU对程序的一次执行过程、一次执行任务。虚拟的地址空间、可执行的代码、操作系统的接口、安全的上下文(记录启动该进程的用户和权限等等)、唯一的进程ID、环境变量、优先级类、最小和最大的工作空间(内存空间),是支配线程的最小单位。一个程序可以有多个进程。


1.2 线程


线程:是进程中执行运算的最小单位,是进程中的一个实体。一个标准的线程由线程ID,当前指令指针(PC),寄存器集合和堆栈组成。一个程序至少有一个进程,一个进程至少有一个线程。操作系统分配CPU的基本单位。线程也是executed content(执行上下文), cpu执行所需要的指令。cpu不断进行交换进行任务并且制造出看似并发进行的任务,线程不断切换所需要的信息都存储在executed content。


1.3 携程


协程:比线程更小的执行单元,又称微线程,在单线程上执行多个任务,自带CPU上下文

用函数切换,开销极小。不通过操作系统调度,

没有进程、线程的切换开销。(gevent,monkey.patchall)


小结


一个程序跑起来至少有一个进程,有独立的内存空间,数据栈。每个进程中至少有一个主线程负责程序的逻辑执行。


一个程序中有多个任务在处理不同的事情,每个事情都可以安排一个线程进行处理,负责到底。

协程是一种各司其职的,有分工的线程,他们处理特定的事情完成后交给其他协程


想要使用协程,那么我们的任务必须有等待。当我们要完成的任务有耗时任务,属于IO密集型任务时,我们使用协程来执行任务会节省很多的资源。


线程和进程的区别


1.同一个进程中的线程共享同一内存空间,但进程之间的内存空间是独立的。


2.同一个进程中的所有线程的数据是共享的,但进程之间的数据是独立的。


3.对主线程的修改可能会影响其他线程的行为,但是父进程的修改(除了删除以外)不会影响其他子进程。


4.线程是一个上下文的执行指令,而进程则是与运算相关的一簇资源。


5.同一进程的线程之间可以相互通信,不同进程不能直接通信,需要借助管道


6.创建一个线程的开销小,创建一个进程需要对父进程进行一次复制


7.同一个进程之中,线程可以相互操作,可以进行平级操作。进程只能操作其子进程


8.线程启动速度块,进程启动速度慢


1.4线程安全


多线程环境中,共享数据同一时间只能有一个线程来操作。


1.5原子操作


原子操作就是不会因为进程并发或者线程并发而导致被中断的操作


1.6并行和并发


  1. 1.并行:多个CPU核心,不同的程序就分配给不同的CPU来运行。可以让多个程序同时执行。(多进程)

  2. 2.并发:单个CPU核心,在一个时间切片里一次只能运行一个程序,如果需要运行多个程序,则串行执行,遇到IO阻塞就切换,即计算机在逻辑上能处理多任务的能力。(多进程,多线程)

1.7多线程, 多进程场景


多进程:密集CPU任务,需要充分使用多核CPU资源(服务器,大量的并行计算)的时候,用多进程。 multiprocessing


缺陷:多个进程之间通信成本高,切换开销大。


多线程:密集I/O任务(网络I/O,磁盘I/O,数据库I/O)使用多线程合适。

threading.Thread、multiprocessing.dummy


缺陷:同一个时间切片只能运行一个线程,不能做到高并行,但是可以做到高并发。


1.8互斥锁、递归锁、升序锁


GIL保证原子操作线程安全


1.互斥锁,互斥锁是用来解决IO密集型场景产生的计算错误,即目的是为了保护共享的数据,同一时间只能有一个线程来修改共享的数据。


2. 递归锁:锁中套了一把锁


3. 升序锁:解决了死锁的问题,给每个锁分配一个id,按照升序的方式让线程按顺序使用多个锁


1.9进程间通讯


1Queue: multiprocessing 中的Queue模块,通过queue.get(), queue.put()


2 Manager: mutiprocessing 中的Manager模块,

manager = Manager()
pname = current_process().name
pid = current_process().pid
print('当前进程是{}_{}'.format(pid, pname))
print(m_dict)
m_dict[pid] = pname
m_list.append(pid)
  1. 3.**进程池:**维护一个进程list, 当有空闲的进程可用的时候就获取,没有可用的时候程序就必须等待直到有可用进程。进程池有同步(appy)和异步(apply_async)
pool = Pool(3)#定义进程池中进程数量
pool.apply_async(func, args=(,), callback=)#当func执行完之后自动执行callback方法
pool.close()
pool.join()

2.0死锁


迭代死锁:该情况是一个线程“迭代”请求同一个资源,直接就会造成死锁。这种死锁产生的原因是我们标准互斥锁threading.Lock的缺点导致的。


标准的锁对象(threading.Lock)并不关心当前是哪个线程占有了该锁;如果该锁已经被占有了,那么任何其它尝试获取该锁的线程都会被阻塞,包括已经占有该锁的线程也会被阻塞。


互相等待死锁:两个进程想要获得的锁已经被对方进程获得,只能互相等待无法释放的锁。


2.1协程的条件


1.必须在只有一个单线程里实现并发


2.修改共享数据不需加锁


3.用户程序里自己保存多个控制流的上下文栈


4.一个协程遇到IO操作自动切换到其它协程


相关文章
|
1月前
|
调度 开发者 Python
深入浅出操作系统:进程与线程的奥秘
在数字世界的底层,操作系统扮演着不可或缺的角色。它如同一位高效的管家,协调和控制着计算机硬件与软件资源。本文将拨开迷雾,深入探索操作系统中两个核心概念——进程与线程。我们将从它们的诞生谈起,逐步剖析它们的本质、区别以及如何影响我们日常使用的应用程序性能。通过简单的比喻,我们将理解这些看似抽象的概念,并学会如何在编程实践中高效利用进程与线程。准备好跟随我一起,揭开操作系统的神秘面纱,让我们的代码运行得更加流畅吧!
|
10天前
|
消息中间件 调度
如何区分进程、线程和协程?看这篇就够了!
本课程主要探讨操作系统中的进程、线程和协程的区别。进程是资源分配的基本单位,具有独立性和隔离性;线程是CPU调度的基本单位,轻量且共享资源,适合并发执行;协程更轻量,由程序自身调度,适合I/O密集型任务。通过学习这些概念,可以更好地理解和应用它们,以实现最优的性能和资源利用。
44 11
|
9天前
|
Java Linux 调度
硬核揭秘:线程与进程的底层原理,面试高分必备!
嘿,大家好!我是小米,29岁的技术爱好者。今天来聊聊线程和进程的区别。进程是操作系统中运行的程序实例,有独立内存空间;线程是进程内的最小执行单元,共享内存。创建进程开销大但更安全,线程轻量高效但易引发数据竞争。面试时可强调:进程是资源分配单位,线程是CPU调度单位。根据不同场景选择合适的并发模型,如高并发用线程池。希望这篇文章能帮你更好地理解并回答面试中的相关问题,祝你早日拿下心仪的offer!
26 6
|
1月前
|
消息中间件 Unix Linux
【C语言】进程和线程详解
在现代操作系统中,进程和线程是实现并发执行的两种主要方式。理解它们的区别和各自的应用场景对于编写高效的并发程序至关重要。
71 6
|
1月前
|
算法 调度 开发者
深入理解操作系统:进程与线程的管理
在数字世界的复杂编织中,操作系统如同一位精明的指挥家,协调着每一个音符的奏响。本篇文章将带领读者穿越操作系统的幕后,探索进程与线程管理的奥秘。从进程的诞生到线程的舞蹈,我们将一起见证这场微观世界的华丽变奏。通过深入浅出的解释和生动的比喻,本文旨在揭示操作系统如何高效地处理多任务,确保系统的稳定性和效率。让我们一起跟随代码的步伐,走进操作系统的内心世界。
|
1月前
|
调度 开发者
核心概念解析:进程与线程的对比分析
在操作系统和计算机编程领域,进程和线程是两个基本而核心的概念。它们是程序执行和资源管理的基础,但它们之间存在显著的差异。本文将深入探讨进程与线程的区别,并分析它们在现代软件开发中的应用和重要性。
68 4
|
7月前
|
监控 Linux 应用服务中间件
探索Linux中的`ps`命令:进程监控与分析的利器
探索Linux中的`ps`命令:进程监控与分析的利器
154 13
|
6月前
|
运维 关系型数据库 MySQL
掌握taskset:优化你的Linux进程,提升系统性能
在多核处理器成为现代计算标准的今天,运维人员和性能调优人员面临着如何有效利用这些处理能力的挑战。优化进程运行的位置不仅可以提高性能,还能更好地管理和分配系统资源。 其中,taskset命令是一个强大的工具,它允许管理员将进程绑定到特定的CPU核心,减少上下文切换的开销,从而提升整体效率。
掌握taskset:优化你的Linux进程,提升系统性能
|
6月前
|
弹性计算 Linux 区块链
Linux系统CPU异常占用(minerd 、tplink等挖矿进程)
Linux系统CPU异常占用(minerd 、tplink等挖矿进程)
212 4
Linux系统CPU异常占用(minerd 、tplink等挖矿进程)
|
5月前
|
算法 Linux 调度
探索进程调度:Linux内核中的完全公平调度器
【8月更文挑战第2天】在操作系统的心脏——内核中,进程调度算法扮演着至关重要的角色。本文将深入探讨Linux内核中的完全公平调度器(Completely Fair Scheduler, CFS),一个旨在提供公平时间分配给所有进程的调度器。我们将通过代码示例,理解CFS如何管理运行队列、选择下一个运行进程以及如何对实时负载进行响应。文章将揭示CFS的设计哲学,并展示其如何在现代多任务计算环境中实现高效的资源分配。

热门文章

最新文章

相关实验场景

更多