Linux内核24-内核同步理解

简介: Linux内核24-内核同步理解

1 引言


我们可以把内核想象成一个服务器,专门响应各种请求。这些请求可以是CPU上正在运行的进程发起的请求,也可以是外部的设备发起的中断请求。所以说,内核并不是串行运行,而是交错执行。既然是交错执行,就会产生竞态条件,我们可以采用同步技术消除这种竞态条件。

我们首先了解一下如何向内核请求服务。然后,看一下这些请求如何实现同步。Linux内核又是采用了哪些同步技术。


2 如何请求内核服务


为了更好地理解内核是如何工作的,我们把内核比喻成一个酒吧服务员,他响应两种请求服务:一种是来自顾客,另外一种来自多个老板。这个服务员采用的策略是:

  1. 如果老板呼叫服务员,而服务员恰巧空闲,则立即服务老板;
  2. 如果老板呼叫服务员,而服务员恰巧正在服务一名顾客。则服务员停止为顾客服务,而是去服务老板。
  3. 如果老板呼叫服务员,而服务员恰巧在服务另一个老板,则服务员停止服务第一个老板,转而服务第二个。当他服务完第二个老板,再回去服务第一个老板。
  4. 老板让服务员停止为顾客服务转而为自己服务。在处理完老板的最后一个请求后,服务员也可能会决定是临时性地放弃之前的顾客,而迎接新顾客。

上面的服务员就非常类似于处于内核态的代码执行。如果CPU被用户态程序占用,服务员被认为是空闲的。老板的请求就类似于中断请求,而顾客请求就对应于用户进程发出的系统调用或异常。后面描述中,异常处理程序指的是系统调用和常规异常的处理程序。

仔细研究,就会发现,前3条规则其实与内核中的异常和中断嵌套执行的规则是一样的。第4条规则就对应于内核抢占。


3 内核抢占


给内核抢占下一个完美定义很难。在这儿,我们只是尝试着给其下一个定义:如果一个进程正运行在内核态,此时,发生了进程切换我们就称其为抢占式内核。当然了,Linux内核不可能这么简单:

  • 不论是抢占式内核还是非抢占式内核,进程都有可能放弃CPU的使用权而休眠等待某些资源。我们称这类进程切换是有计划的进程切换。但是抢占式内核和非抢占式的区别就在于对于异步事件的响应方式不同-比如,抢占式内核的中断处理程序可以唤醒更高优先级的进程,而非抢占式内核不会。我们称这类进程切换为强迫性的进程切换。
  • 我们已经知道所有的进程切换动作都由switch_to宏完成。不论是抢占式还是非抢占式,当进程完成内核活动的某个线程并调用调度器时就会发生进程切换。但是,在非抢占式内核中,除非即将切换到用户态时,否则不会发生进程替换。

因此,抢占式内核主要的特性就是运行在内核态的进程可以被其它进程打断而发生替换。让我们举例说明抢占式内核和非抢占式内核的区别:

假设进程A正在执行异常处理程序(内核态),这时候中断请求IRQ发生,相应的处理程序唤醒高优先级的进程B。如果内核是可抢占式的,就会发生进程A到进程B的替换。异常处理程序还没有执行完,只有当调度器再一次选择进程A执行的时候才会继续。相反,如果内核是非抢占式的,除非进程A完成异常处理或者自愿放弃CPU的使用权,否则不会发生进程切换。

再比如,考虑正在执行异常处理程序的进程,它的CPU使用时间已经超时。如果内核是抢占式的,进程被立即切换;但是,如果内核是非抢占式的,进程会继续执行,知道进程完成异常处理或自动放弃CPU的使用权。

实施内核抢占的动机就是减少用户态进程的调度延时,也就是减少可运行状态真正运行时的延时。需要实时调度的任务(比如外部的硬件控制器等)需要内核具有抢占性,因为减少了被其它进程延时的风险。

Linux内核是从2.6版本开始的,相比那些旧版本的非抢占性内核而言,没有什么显著的变化。当thread_info描述符中的preempt_count成员的值大于0,内核抢占就被禁止。这个值分为3部分,也就是说可能有3种情况导致该值大于0:

  1. 内核正在执行中断服务例程(ISR);
  2. 延时函数被禁止(当内核执行软中断或tasklet时总是使能状态);
  3. 内核抢占被禁止。

通过上面的规则可以看出,内核只有在执行异常处理程序(尤其是系统调用)的时候才能够被抢占,而且内核抢占也没有被禁止。所以,CPU必须使能中断,内核抢占才能被执行。

下表是操作prempt_count数据成员的一些宏:


Macro 描述
preempt_count() 选择preempt_count
preempt_disable() 抢占计数加1
preempt_enable_no_resched() 抢占计数减1
preempt_enable()

抢占计数减1,如果需要调度

,调用preempt_schedule()

get_cpu()

preempt_disable()相似

,但是返回CPU的数量

put_cpu() preempt_enable()相似
put_cpu_no_resched() preempt_enable_no_resched()相似


preempt_enable()使能抢占,还会检查TIF_NEED_RESCHED标志是否设置。如果设置,说明需要进行进程切换,就会调用函数preempt_schedule(),其代码片段如下所示:

if (!current_thread_info->preempt_count && !irqs_disabled()) {
    current_thread_info->preempt_count = PREEMPT_ACTIVE;
    schedule();
    current_thread_info->preempt_count = 0;
}

可以看出,这个函数首先检查中断是否使能,以及抢占计数是否为0。如果条件为真,调用schedule()切换到其它进程运行。因此,内核抢占既可以发生在中断处理程序结束时,也可以发生在异常处理程序重新使能内核抢占时(调用preempt_enable()也就是说,对于抢占式内核来说,进程切换发生的时机有,中断、系统调用、异常处理,还有一种特殊情况就是内核线程,它们直接调用schedule()进行主动进程切换。

内核抢占不可避免地引入了更多的开销。基于这个原因,Linux2.6内核允许用户在编译内核代码的时候,通过配置,可以使能和禁止内核抢占。


4 什么时候需要同步技术?


我们先了解一下内核进程的竞态条件和临界区的概念。当计算结果依赖于两个嵌套的内核控制路径时就会发生竞态条件。而临界区就是每次只能一个内核控制路径可以进入的代码段。

内核控制路径的交错执行给内核开发者带来很大的麻烦:必须小心地在异常处理程序、中断处理程序、可延时处理函数和内核线程中确定临界区。一旦确定了哪些代码是临界区,就需要为这个临界区代码提供合适的保护,确保至多有一个内核控制路径可以访问它。

假设两个不同的中断处理程序需要访问相同的数据结构。所有影响数据结构的语句都必须放到一个临界区中。如果是单核处理系统,临界区的保护只需要关闭中断即可,因为内核控制路径的嵌套只有在中断使能的情况下会发生。

另一方面,如果不同的系统调用服务程序访问相同的数据,系统也是单核处理系统,临界区的保护只需要禁止内核抢占即可。

但是,在多核系统中事情就比较复杂了。因为除了内核抢占,中断、异常或软中断之外,多个CPU也可能会同时访问某个相同的数据

后面我们会看一下内核提供了哪些内核同步手段?每种同步手段最合适的使用场景是什么?通过这些问题,我们掌握内核同步技术,为自己的内核程序设计最好的同步方法。


5 都有哪些同步技术?


表5-2,列举了Linux内核使用的一些同步技术。范围一栏表明同步技术应用到所有的CPU还是单个CPU。比如局部中断禁止就是针对一个CPU(系统中的其它CPU不受影响);相反,原子操作影响所有的CPU。

表5-2 Linux内核使用的一些同步技术

技术 描述 范围
Per-CPU变量 用于在CPU之间拷贝数据 所有CPU
原子操作 针对计数器的原子RMW指令 所有CPU
内存屏障 避免指令乱序

本地CPU

或所有CPU

自旋锁 忙等待 所有CPU
信号量 阻塞等待(休眠) 所有CPU
Seqlock 根据计数器进行加锁 所有CPU
中断禁止 禁止响应中断 本地CPU
软中断禁止 禁止处理可延时函数 本地CPU

读-拷贝-更新

(RCU)

通过指针实现无锁

访问共享资源

所有CPU


后面我们会针对每种同步技术进行详细阐述。

相关文章
|
17天前
|
算法 Linux
深入探索Linux内核的内存管理机制
本文旨在为读者提供对Linux操作系统内核中内存管理机制的深入理解。通过探讨Linux内核如何高效地分配、回收和优化内存资源,我们揭示了这一复杂系统背后的原理及其对系统性能的影响。不同于常规的摘要,本文将直接进入主题,不包含背景信息或研究目的等标准部分,而是专注于技术细节和实际操作。
|
17天前
|
存储 缓存 网络协议
Linux操作系统的内核优化与性能调优####
本文深入探讨了Linux操作系统内核的优化策略与性能调优方法,旨在为系统管理员和高级用户提供一套实用的指南。通过分析内核参数调整、文件系统选择、内存管理及网络配置等关键方面,本文揭示了如何有效提升Linux系统的稳定性和运行效率。不同于常规摘要仅概述内容的做法,本摘要直接指出文章的核心价值——提供具体可行的优化措施,助力读者实现系统性能的飞跃。 ####
|
18天前
|
监控 算法 Linux
Linux内核锁机制深度剖析与实践优化####
本文作为一篇技术性文章,深入探讨了Linux操作系统内核中锁机制的工作原理、类型及其在并发控制中的应用,旨在为开发者提供关于如何有效利用这些工具来提升系统性能和稳定性的见解。不同于常规摘要的概述性质,本文将直接通过具体案例分析,展示在不同场景下选择合适的锁策略对于解决竞争条件、死锁问题的重要性,以及如何根据实际需求调整锁的粒度以达到最佳效果,为读者呈现一份实用性强的实践指南。 ####
|
18天前
|
缓存 监控 网络协议
Linux操作系统的内核优化与实践####
本文旨在探讨Linux操作系统内核的优化策略与实际应用案例,深入分析内核参数调优、编译选项配置及实时性能监控的方法。通过具体实例讲解如何根据不同应用场景调整内核设置,以提升系统性能和稳定性,为系统管理员和技术爱好者提供实用的优化指南。 ####
|
20天前
|
负载均衡 算法 Linux
深入探索Linux内核调度机制:公平与效率的平衡####
本文旨在剖析Linux操作系统内核中的进程调度机制,特别是其如何通过CFS(完全公平调度器)算法实现多任务环境下资源分配的公平性与系统响应速度之间的微妙平衡。不同于传统摘要的概览性质,本文摘要将直接聚焦于CFS的核心原理、设计目标及面临的挑战,为读者揭开Linux高效调度的秘密。 ####
32 3
|
23天前
|
负载均衡 算法 Linux
深入探索Linux内核调度器:公平与效率的平衡####
本文通过剖析Linux内核调度器的工作机制,揭示了其在多任务处理环境中如何实现时间片轮转、优先级调整及完全公平调度算法(CFS),以达到既公平又高效地分配CPU资源的目标。通过对比FIFO和RR等传统调度策略,本文展示了Linux调度器如何在复杂的计算场景下优化性能,为系统设计师和开发者提供了宝贵的设计思路。 ####
35 6
|
23天前
|
消息中间件 安全 Linux
深入探索Linux操作系统的内核机制
本文旨在为读者提供一个关于Linux操作系统内核机制的全面解析。通过探讨Linux内核的设计哲学、核心组件、以及其如何高效地管理硬件资源和系统操作,本文揭示了Linux之所以成为众多开发者和组织首选操作系统的原因。不同于常规摘要,此处我们不涉及具体代码或技术细节,而是从宏观的角度审视Linux内核的架构和功能,为对Linux感兴趣的读者提供一个高层次的理解框架。
|
24天前
|
缓存 并行计算 Linux
深入解析Linux操作系统的内核优化策略
本文旨在探讨Linux操作系统内核的优化策略,包括内核参数调整、内存管理、CPU调度以及文件系统性能提升等方面。通过对这些关键领域的分析,我们可以理解如何有效地提高Linux系统的性能和稳定性,从而为用户提供更加流畅和高效的计算体验。
29 2
|
24天前
|
缓存 网络协议 Linux
深入探索Linux操作系统的内核优化策略####
本文旨在探讨Linux操作系统内核的优化方法,通过分析当前主流的几种内核优化技术,结合具体案例,阐述如何有效提升系统性能与稳定性。文章首先概述了Linux内核的基本结构,随后详细解析了内核优化的必要性及常用手段,包括编译优化、内核参数调整、内存管理优化等,最后通过实例展示了这些优化技巧在实际场景中的应用效果,为读者提供了一套实用的Linux内核优化指南。 ####
45 1
|
24天前
|
算法 前端开发 Linux
深入理解Linux内核调度器:CFS与实时性的平衡####
本文旨在探讨Linux操作系统的核心组件之一——完全公平调度器(CFS)的工作原理,分析其在多任务处理环境中如何实现进程间的公平调度,并进一步讨论Linux对于实时性需求的支持策略。不同于传统摘要仅概述内容要点,本部分将简要预览CFS的设计哲学、核心算法以及它是如何通过红黑树数据结构来维护进程执行顺序,同时触及Linux内核为满足不同应用场景下的实时性要求而做出的权衡与优化。 ####