python高级-线程和进程相关(下)

简介: python高级-线程和进程相关(上)

5.2.方式2

import multiprocessing
import time
g_list = list()
def add_data():
    for i in range(6):
        g_list.append(i)
        print("add: ",i)
        time.sleep(0.2)
    print("add_data: ",g_list)
def read_data():
    print("read_data",g_list)
if __name__ == '__main__':
    # 创建添加数据的子进程
    add_data_process = multiprocessing.Process(target=add_data)
    # 创建读取数据的子进程
    read_data_process = multiprocessing.Process(target=read_data)
    #锁
    add_data_process.daemon = True
    #启动子进程执行对应的任务
    add_data_process.start()
    #阻塞函数,add_data_process执行完才会继续向下执行
    add_data_process.join()
    #全局变量不共享
    read_data_process.start()


五、线程

1.线程创建

import threading
import time
def task1():
    t = threading.currentThread()
    print("task1: ",t)
    for i in range(5):
        print(" Task A ", i+1)
        time.sleep(0.5)
def task2():
    t = threading.currentThread()
    print("task2: ",t)
    for i in range(5):
        print(" Task B ", i+1)
        time.sleep(0.5)
#创建线程
if __name__ == '__main__':
    t1 = threading.Thread(target=task1,name='t1')
    t2 = threading.Thread(target=task2,name='t2')
    print(t1)
    print(t2)
    #创建好线程后,线程并不会被执行
    #必须启动线程
    t1.start()
    t2.start()
    print(t1)
    print(t2)
    print("Main Thread")

2.线程执行带有参数的任务

import threading
import time
def task(count):
    for i in range(count):
        print("任务执行中。。。")
        time.sleep(0.2)
    else:
        print("任务执行完成")
def task1(content , count):
    for i in range(count):
        print(content,'--',i+1)
        time.sleep(0.5)
if __name__ == '__main__':
    sub_thread = threading.Thread(target=task,args=(5,))
    sub_thread2 = threading.Thread(target=task1,args=('Python',5))
    sub_thread.start()
    sub_thread2.start()

3.线程的无序性

import threading
import time
def task():
    t = threading.current_thread()
    for i in range(10):
        print(t.name)
        time.sleep(0.5)
if __name__ == '__main__':
    for i in range(5):
        t = threading.Thread(target=task)
        t.start()

4.守护主线程

没有守护线程,主线程会随即执行

import threading
import time
def task():
    t = threading.current_thread()
    for i in range(5):
        print(t.name)
        time.sleep(0.5)
if __name__ == '__main__':
    t1 = threading.Thread(target=task,name='t1')
    t2 = threading.Thread(target=task,name='t2')
    t1.start()
    t2.start()
    print("main over")

方法1

这个方法主线程不等待子线程所以会出现问题

import threading
import time
def task():
    t = threading.current_thread()
    for i in range(5):
        print(t.name)
        time.sleep(0.5)
if __name__ == '__main__':
    t1 = threading.Thread(target=task,name='t1',daemon=True)
    t2 = threading.Thread(target=task,name='t2',daemon=True)
    t1.start()
    t2.start()
    print("main over")

方法2

import threading
import time
def task():
    t = threading.current_thread()
    for i in range(5):
        print(t.name)
        time.sleep(0.5)
if __name__ == '__main__':
    t1 = threading.Thread(target=task,name='t1')
    t2 = threading.Thread(target=task,name='t2')
    t1.setDaemon(True)
    t2.setDaemon(True)
    t1.start()
    t2.start()
    print("main over")

5.阻塞线程

import threading
import time
def task():
    t = threading.current_thread()
    for i in range(5):
        print(t.name)
        time.sleep(0.5)
if __name__ == '__main__':
    t1 = threading.Thread(target=task,name='t1')
    t2 = threading.Thread(target=task,name='t2')
    t1.setDaemon(True)
    t2.setDaemon(True)
    t1.start()
    t2.start()
    t1.join()
    t2.join()
    print("main over")

6.线程间共享全局变量

import threading
import time
c_list = []
def add_data():
    for i in range(5):
        c_list.append(i)
        print(c_list)
        time.sleep(0.5)
def read_data():
    print("read: ",c_list)
if __name__ == '__main__':
    add_t = threading.Thread(target=add_data)
    read_t = threading.Thread(target=read_data)
    add_t.start()
    read_t.start()

7.多线程中共享变量的资源竞争问题

import threading
import time
g_num = 0
def sum_num1():
    for i in range(1000000000):
        global g_num
        g_num += 1
    print("sum1:  ",g_num)
if __name__ == '__main__':
    f_t = threading.Thread(target=sum_num1)
    f_t2 = threading.Thread(target=sum_num1)
    f_t.start()
    f_t2.start()
    time.sleep(3)
    print("main",g_num)

转存失败重新上传取消

时间片轮转的问题

8.使用线程同步解决

线程等待(阻塞)

import threading
import time
g_num = 0
def sum_num1():
    for i in range(1000000000):
        global g_num
        g_num += 1
    print("sum1:  ",g_num)
if __name__ == '__main__':
    f_t = threading.Thread(target=sum_num1)
    f_t2 = threading.Thread(target=sum_num1)
    f_t.start()
    #阻塞
    f_t.join()
    f_t2.start()
    f_t2.join()
    time.sleep(3)
    print("main",g_num)

转存失败重新上传取消

9.互斥锁

上锁

原子操作

解锁

import threading
import time
#创建一个实例锁
metax_lock = threading.Lock()
g_num = 0
def sum_num1():
    t = threading.current_thread()
    for i in range(1000000000):
        metax_lock.acquire()
        global g_num
        g_num += 1
        print(t.name,"=------=",g_num)
        metax_lock.release()
    print("sum1:  ",g_num)
if __name__ == '__main__':
    f_t = threading.Thread(target=sum_num1)
    f_t2 = threading.Thread(target=sum_num1)
    f_t.start()
    f_t2.start()
    time.sleep(3)
    print("main",g_num)

注意不要变成同步锁,一般都是异步执行

10.死锁

这个函数就有个死锁

import multiprocessing
import threading
import time
c_list = [1,2,3,4325]
lock = threading.Lock()
def get_value(index):
    #锁
    lock.acquire()
    t = threading.current_thread()
    if index >= len(c_list):
        print(f'{index} 下界太大,导致下标越界')
        return 
    print(t.name,"取得第",index,'个值,值为',c_list[index])
    lock.release()
if __name__ == '__main__':
    for i in range(5):
        t = threading.Thread(target=get_value,args=(i,))
        t.start()

我们解决掉他

import multiprocessing
import threading
import time
c_list = [1,2,3,4325]
lock = threading.Lock()
def get_value(index):
    #锁
    lock.acquire()
    t = threading.current_thread()
    if index >= len(c_list):
        print(f'{index} 下界太大,导致下标越界')
        lock.release()
        return
    print(t.name,"取得第",index,'个值,值为',c_list[index])
    lock.release()
if __name__ == '__main__':
    for i in range(5):
        t = threading.Thread(target=get_value,args=(i,))
        t.start()

但这里其实还有问题,我们后面讨论

11.死锁哲学家问题

import multiprocessing
import threading
import time
lock_a = threading.Lock()
lock_b = threading.Lock()
def PersonA():
    for i in range(100):
        lock_a.acquire()
        print("A抢到第一个筷子,加一个锁")
        lock_b.acquire()
        print("A加第二个锁,强盗第二根筷子,吃一口饭")
        lock_b.release()
        print("A释放锁,放下第二根筷子")
        lock_a.release()
        print("A加第一个锁,抢到第一根筷子")
def PersonB():
    for i in range(100):
        lock_a.acquire()
        print("B抢到第一个筷子,加一个锁")
        lock_b.acquire()
        print("B加第二个锁,强盗第二根筷子,吃一口饭")
        lock_b.release()
        print("B释放锁,放下第二根筷子")
        lock_a.release()
        print("B加第一个锁,抢到第一根筷子")
if __name__ == '__main__':
    pa = threading.Thread(target=PersonA)
    pb = threading.Thread(target=PersonB)
    pa.start()
    pb.start()


结语

python的部分快要结束了,后面要更新linux服务器和k8s的笔记,希望大家多多👍

相关文章
|
4月前
|
存储 Linux API
【Linux进程概念】—— 操作系统中的“生命体”,计算机里的“多线程”
在计算机系统的底层架构中,操作系统肩负着资源管理与任务调度的重任。当我们启动各类应用程序时,其背后复杂的运作机制便悄然展开。程序,作为静态的指令集合,如何在系统中实现动态执行?本文带你一探究竟!
【Linux进程概念】—— 操作系统中的“生命体”,计算机里的“多线程”
|
2月前
|
并行计算 Linux
Linux内核中的线程和进程实现详解
了解进程和线程如何工作,可以帮助我们更好地编写程序,充分利用多核CPU,实现并行计算,提高系统的响应速度和计算效能。记住,适当平衡进程和线程的使用,既要拥有独立空间的'兄弟',也需要在'家庭'中分享和并行的成员。对于这个世界,现在,你应该有一个全新的认识。
176 67
|
3月前
|
SQL 监控 网络协议
YashanDB进程线程体系
YashanDB进程线程体系
|
5月前
|
并行计算 安全 Java
Python GIL(全局解释器锁)机制对多线程性能影响的深度分析
在Python开发中,GIL(全局解释器锁)一直备受关注。本文基于CPython解释器,探讨GIL的技术本质及其对程序性能的影响。GIL确保同一时刻只有一个线程执行代码,以保护内存管理的安全性,但也限制了多线程并行计算的效率。文章分析了GIL的必要性、局限性,并介绍了多进程、异步编程等替代方案。尽管Python 3.13计划移除GIL,但该特性至少要到2028年才会默认禁用,因此理解GIL仍至关重要。
442 16
Python GIL(全局解释器锁)机制对多线程性能影响的深度分析
|
4月前
|
Python
python3多线程中使用线程睡眠
本文详细介绍了Python3多线程编程中使用线程睡眠的基本方法和应用场景。通过 `time.sleep()`函数,可以使线程暂停执行一段指定的时间,从而控制线程的执行节奏。通过实际示例演示了如何在多线程中使用线程睡眠来实现计数器和下载器功能。希望本文能帮助您更好地理解和应用Python多线程编程,提高程序的并发能力和执行效率。
116 20
|
3月前
|
数据采集 存储 安全
Python爬虫实战:利用短效代理IP爬取京东母婴纸尿裤数据,多线程池并行处理方案详解
本文分享了一套结合青果网络短效代理IP和多线程池技术的电商数据爬取方案,针对京东母婴纸尿裤类目商品信息进行高效采集。通过动态代理IP规避访问限制,利用多线程提升抓取效率,同时确保数据采集的安全性和合法性。方案详细介绍了爬虫开发步骤、网页结构分析及代码实现,适用于大规模电商数据采集场景。
|
4月前
|
数据采集 Java 数据处理
Python实用技巧:轻松驾驭多线程与多进程,加速任务执行
在Python编程中,多线程和多进程是提升程序效率的关键工具。多线程适用于I/O密集型任务,如文件读写、网络请求;多进程则适合CPU密集型任务,如科学计算、图像处理。本文详细介绍这两种并发编程方式的基本用法及应用场景,并通过实例代码展示如何使用threading、multiprocessing模块及线程池、进程池来优化程序性能。结合实际案例,帮助读者掌握并发编程技巧,提高程序执行速度和资源利用率。
146 0
|
5月前
|
消息中间件 调度
如何区分进程、线程和协程?看这篇就够了!
本课程主要探讨操作系统中的进程、线程和协程的区别。进程是资源分配的基本单位,具有独立性和隔离性;线程是CPU调度的基本单位,轻量且共享资源,适合并发执行;协程更轻量,由程序自身调度,适合I/O密集型任务。通过学习这些概念,可以更好地理解和应用它们,以实现最优的性能和资源利用。
152 11
|
5月前
|
Java Linux 调度
硬核揭秘:线程与进程的底层原理,面试高分必备!
嘿,大家好!我是小米,29岁的技术爱好者。今天来聊聊线程和进程的区别。进程是操作系统中运行的程序实例,有独立内存空间;线程是进程内的最小执行单元,共享内存。创建进程开销大但更安全,线程轻量高效但易引发数据竞争。面试时可强调:进程是资源分配单位,线程是CPU调度单位。根据不同场景选择合适的并发模型,如高并发用线程池。希望这篇文章能帮你更好地理解并回答面试中的相关问题,祝你早日拿下心仪的offer!
96 6

热门文章

最新文章

推荐镜像

更多