python高级-线程和进程相关(下)

简介: python高级-线程和进程相关(上)

5.2.方式2

import multiprocessing
import time
g_list = list()
def add_data():
    for i in range(6):
        g_list.append(i)
        print("add: ",i)
        time.sleep(0.2)
    print("add_data: ",g_list)
def read_data():
    print("read_data",g_list)
if __name__ == '__main__':
    # 创建添加数据的子进程
    add_data_process = multiprocessing.Process(target=add_data)
    # 创建读取数据的子进程
    read_data_process = multiprocessing.Process(target=read_data)
    #锁
    add_data_process.daemon = True
    #启动子进程执行对应的任务
    add_data_process.start()
    #阻塞函数,add_data_process执行完才会继续向下执行
    add_data_process.join()
    #全局变量不共享
    read_data_process.start()


五、线程

1.线程创建

import threading
import time
def task1():
    t = threading.currentThread()
    print("task1: ",t)
    for i in range(5):
        print(" Task A ", i+1)
        time.sleep(0.5)
def task2():
    t = threading.currentThread()
    print("task2: ",t)
    for i in range(5):
        print(" Task B ", i+1)
        time.sleep(0.5)
#创建线程
if __name__ == '__main__':
    t1 = threading.Thread(target=task1,name='t1')
    t2 = threading.Thread(target=task2,name='t2')
    print(t1)
    print(t2)
    #创建好线程后,线程并不会被执行
    #必须启动线程
    t1.start()
    t2.start()
    print(t1)
    print(t2)
    print("Main Thread")

2.线程执行带有参数的任务

import threading
import time
def task(count):
    for i in range(count):
        print("任务执行中。。。")
        time.sleep(0.2)
    else:
        print("任务执行完成")
def task1(content , count):
    for i in range(count):
        print(content,'--',i+1)
        time.sleep(0.5)
if __name__ == '__main__':
    sub_thread = threading.Thread(target=task,args=(5,))
    sub_thread2 = threading.Thread(target=task1,args=('Python',5))
    sub_thread.start()
    sub_thread2.start()

3.线程的无序性

import threading
import time
def task():
    t = threading.current_thread()
    for i in range(10):
        print(t.name)
        time.sleep(0.5)
if __name__ == '__main__':
    for i in range(5):
        t = threading.Thread(target=task)
        t.start()

4.守护主线程

没有守护线程,主线程会随即执行

import threading
import time
def task():
    t = threading.current_thread()
    for i in range(5):
        print(t.name)
        time.sleep(0.5)
if __name__ == '__main__':
    t1 = threading.Thread(target=task,name='t1')
    t2 = threading.Thread(target=task,name='t2')
    t1.start()
    t2.start()
    print("main over")

方法1

这个方法主线程不等待子线程所以会出现问题

import threading
import time
def task():
    t = threading.current_thread()
    for i in range(5):
        print(t.name)
        time.sleep(0.5)
if __name__ == '__main__':
    t1 = threading.Thread(target=task,name='t1',daemon=True)
    t2 = threading.Thread(target=task,name='t2',daemon=True)
    t1.start()
    t2.start()
    print("main over")

方法2

import threading
import time
def task():
    t = threading.current_thread()
    for i in range(5):
        print(t.name)
        time.sleep(0.5)
if __name__ == '__main__':
    t1 = threading.Thread(target=task,name='t1')
    t2 = threading.Thread(target=task,name='t2')
    t1.setDaemon(True)
    t2.setDaemon(True)
    t1.start()
    t2.start()
    print("main over")

5.阻塞线程

import threading
import time
def task():
    t = threading.current_thread()
    for i in range(5):
        print(t.name)
        time.sleep(0.5)
if __name__ == '__main__':
    t1 = threading.Thread(target=task,name='t1')
    t2 = threading.Thread(target=task,name='t2')
    t1.setDaemon(True)
    t2.setDaemon(True)
    t1.start()
    t2.start()
    t1.join()
    t2.join()
    print("main over")

6.线程间共享全局变量

import threading
import time
c_list = []
def add_data():
    for i in range(5):
        c_list.append(i)
        print(c_list)
        time.sleep(0.5)
def read_data():
    print("read: ",c_list)
if __name__ == '__main__':
    add_t = threading.Thread(target=add_data)
    read_t = threading.Thread(target=read_data)
    add_t.start()
    read_t.start()

7.多线程中共享变量的资源竞争问题

import threading
import time
g_num = 0
def sum_num1():
    for i in range(1000000000):
        global g_num
        g_num += 1
    print("sum1:  ",g_num)
if __name__ == '__main__':
    f_t = threading.Thread(target=sum_num1)
    f_t2 = threading.Thread(target=sum_num1)
    f_t.start()
    f_t2.start()
    time.sleep(3)
    print("main",g_num)

转存失败重新上传取消

时间片轮转的问题

8.使用线程同步解决

线程等待(阻塞)

import threading
import time
g_num = 0
def sum_num1():
    for i in range(1000000000):
        global g_num
        g_num += 1
    print("sum1:  ",g_num)
if __name__ == '__main__':
    f_t = threading.Thread(target=sum_num1)
    f_t2 = threading.Thread(target=sum_num1)
    f_t.start()
    #阻塞
    f_t.join()
    f_t2.start()
    f_t2.join()
    time.sleep(3)
    print("main",g_num)

转存失败重新上传取消

9.互斥锁

上锁

原子操作

解锁

import threading
import time
#创建一个实例锁
metax_lock = threading.Lock()
g_num = 0
def sum_num1():
    t = threading.current_thread()
    for i in range(1000000000):
        metax_lock.acquire()
        global g_num
        g_num += 1
        print(t.name,"=------=",g_num)
        metax_lock.release()
    print("sum1:  ",g_num)
if __name__ == '__main__':
    f_t = threading.Thread(target=sum_num1)
    f_t2 = threading.Thread(target=sum_num1)
    f_t.start()
    f_t2.start()
    time.sleep(3)
    print("main",g_num)

注意不要变成同步锁,一般都是异步执行

10.死锁

这个函数就有个死锁

import multiprocessing
import threading
import time
c_list = [1,2,3,4325]
lock = threading.Lock()
def get_value(index):
    #锁
    lock.acquire()
    t = threading.current_thread()
    if index >= len(c_list):
        print(f'{index} 下界太大,导致下标越界')
        return 
    print(t.name,"取得第",index,'个值,值为',c_list[index])
    lock.release()
if __name__ == '__main__':
    for i in range(5):
        t = threading.Thread(target=get_value,args=(i,))
        t.start()

我们解决掉他

import multiprocessing
import threading
import time
c_list = [1,2,3,4325]
lock = threading.Lock()
def get_value(index):
    #锁
    lock.acquire()
    t = threading.current_thread()
    if index >= len(c_list):
        print(f'{index} 下界太大,导致下标越界')
        lock.release()
        return
    print(t.name,"取得第",index,'个值,值为',c_list[index])
    lock.release()
if __name__ == '__main__':
    for i in range(5):
        t = threading.Thread(target=get_value,args=(i,))
        t.start()

但这里其实还有问题,我们后面讨论

11.死锁哲学家问题

import multiprocessing
import threading
import time
lock_a = threading.Lock()
lock_b = threading.Lock()
def PersonA():
    for i in range(100):
        lock_a.acquire()
        print("A抢到第一个筷子,加一个锁")
        lock_b.acquire()
        print("A加第二个锁,强盗第二根筷子,吃一口饭")
        lock_b.release()
        print("A释放锁,放下第二根筷子")
        lock_a.release()
        print("A加第一个锁,抢到第一根筷子")
def PersonB():
    for i in range(100):
        lock_a.acquire()
        print("B抢到第一个筷子,加一个锁")
        lock_b.acquire()
        print("B加第二个锁,强盗第二根筷子,吃一口饭")
        lock_b.release()
        print("B释放锁,放下第二根筷子")
        lock_a.release()
        print("B加第一个锁,抢到第一根筷子")
if __name__ == '__main__':
    pa = threading.Thread(target=PersonA)
    pb = threading.Thread(target=PersonB)
    pa.start()
    pb.start()


结语

python的部分快要结束了,后面要更新linux服务器和k8s的笔记,希望大家多多👍

相关文章
|
11天前
|
Go 调度 开发者
[go 面试] 深入理解进程、线程和协程的概念及区别
[go 面试] 深入理解进程、线程和协程的概念及区别
|
4天前
|
算法 Java
JUC(1)线程和进程、并发和并行、线程的状态、lock锁、生产者和消费者问题
该博客文章综合介绍了Java并发编程的基础知识,包括线程与进程的区别、并发与并行的概念、线程的生命周期状态、`sleep`与`wait`方法的差异、`Lock`接口及其实现类与`synchronized`关键字的对比,以及生产者和消费者问题的解决方案和使用`Condition`对象替代`synchronized`关键字的方法。
JUC(1)线程和进程、并发和并行、线程的状态、lock锁、生产者和消费者问题
|
6天前
|
开发工具 计算机视觉 Python
大恒相机 - Python 多线程拍摄
大恒相机 - Python 多线程拍摄
17 1
|
8天前
|
调度 Python
|
7天前
|
Python
python Process 多进程编程
python Process 多进程编程
17 1
|
10天前
|
Shell Python
Python多线程怎么做?
Python 3 中利用 `threading` 模块实现多线程。创建与执行线程有两种常见方式:一是直接使用 `Thread` 类实例,指定目标函数;二是通过继承 `Thread` 类并重写 `run` 方法。前者构造 `Thread` 对象时通过 `target` 参数指定函数,后者则在子类中定义线程的行为。两种方式均需调用 `start` 方法启动线程。示例展示了这两种创建线程的方法及输出顺序,体现线程并发执行的特点。
|
11天前
|
存储 安全 Python
[python]使用标准库logging实现多进程安全的日志模块
[python]使用标准库logging实现多进程安全的日志模块
|
16天前
|
安全 开发者 Python
跨越编程孤岛,构建互联大陆:深入探索Python进程间通信的奥秘,解锁高效协作新纪元!
【8月更文挑战第3天】在编程领域,Python 因其简洁强大而广受欢迎。但随着项目规模扩大,单进程难以应对复杂需求,此时多进程间的协同就显得尤为重要。各进程像孤岛般独立运行,虽提升了稳定性和并发能力,但也带来了沟通障碍。为解决这一问题,Python 提供了多种进程间通信(IPC)方式,如管道、队列和套接字等,它们能有效促进数据交换和任务协作,使各进程像大陆般紧密相连。通过这些机制,我们能轻松搭建起高效的多进程应用系统,实现更加复杂的业务逻辑。
18 2
|
16天前
|
消息中间件 Kafka 数据安全/隐私保护
Python IPC实战指南:构建高效稳定的进程间通信桥梁
【8月更文挑战第3天】在软件开发中,高效的进程间通信(IPC)对于构建复杂系统至关重要。本文通过分布式日志处理系统的案例,演示如何利用Python实现可靠的IPC。系统由多个收集日志的进程及中心服务器构成,选用套接字作为IPC机制以支持跨网通信与并发。实战包括定义通信协议、实现日志发送与接收功能,并进行测试部署。此方案不仅展现了Python在IPC领域的强大能力,还为实际应用中的错误处理、数据安全等问题提供了思考方向。
14 1
|
6天前
|
SQL 机器学习/深度学习 算法
【python】python指南(一):线程Thread
【python】python指南(一):线程Thread
19 0