【5. 虚拟内存管理】

简介: 题目描述 :页面大小为4k, 分配给每个进程的物理页面是1. 在一个进程中, 定义了如下的二维数组 int A[1024][1024]. 该数组按行存放在内存, 每一行放在一个页面中.考虑一下程序的编写方法对缺页率的影响?

🍵虚拟内存管理

  • 起因
  • 覆盖技术
  • 交换技术
  • 虚存技术

    • 目标
    • 程序局部性原理
    • 基本概念
    • 基本特性
    • 虚拟页式内存管理

🍗5.1 虚拟内存起因

  • 随着运行程序的不断增大,内存逐渐不够用,此时需要用到虚拟内存,使用硬盘/磁盘使更多的程序在有限的内存中运行

🍣5.1.1 理想中的存储器

  • 更大、更快、更便宜的非易失性存储器

1661143530288.png

    1. 把容量很小、速度很快的一些存储器,放在离CPU近的地方,使得CPU可以更快的访问到
    1. 内存比寄存器速度慢,所以中间会有多个缓存,目的就是缓存内存的数据,使得CPU尽量把数据从缓存中取到,而不是从主存中取到,来保证CPU访问程序尽可能快

🍣5.1.2 问题

  • 硬盘容量很大,但是程序只能在内存中执行,需要考虑的是怎么把硬盘当中的程序,放到内存中执行

🍗5.2 覆盖技术

  • 如果程序太大,超过了内存容量,可以采用手动覆盖技术,只需要把指令和数据保存在内存当中。

🍣5.2.1 目的

  • 是在较小的可用内存中运行较大的程序, 常用于多道程序系统, 与分区存储管理配合使用.

🍣5.2.2 原理

  • 把程序按照其自身逻辑结构, 划分为若干个功能上相互独立的程序模块, 那些不会同时执行的模块共享同一块内存区域, 按时间先后来运行.

    • 必要部分(常用功能)的代码和数据常驻内存;
    • 可选部分(不常用功能)在其他程序模块中实现, 平时存放在外存中, 在需要用到时才装入内存;
    • 不存在调用关系的模块不必同时装入到内存, 从而可以相互覆盖, 即这些模块共用一个分区.
也就是说,程序松耦合的部分可以按需装入内存,不需要的时候放在外存中,多个不常用部分共用一个分区.

🍣5.2.3 实例

  • 不需要将整个程序190k的数据全部放入内存中, 而是划分为 常驻区(20k) 覆盖区0(50k) 覆盖区1(40k) 压缩至了110k的内存空间使用

1661143585665.png

🍣5.2.4 缺点

  • 由程序员来把一个大的程序划分为若干个小的功能模块, 并确定各个模块之间的覆盖关系, 费时费力, 增加了编程的复杂度;
  • 覆盖模块并从外存装入内存, 实际上是以时间延长来换取空间节省.

🍗5.3 交换技术

  • 如果程序太多,超过了内存容量,可以采用自动交换技术,把暂时不能执行的程序送到外存中(硬盘)

🍣5.3.1 目的

  • 多道程序在内存时, 让正在运行的程序或需要运行的程序获得更多的内存资源

🍣5.3.2 原理

  • 可将暂时不能运行的程序送到外存, 从而获得空闲内存空间.
  • 操作系统把一个进程的整个地址空间的内容保存到外存中(换出 swap out), 而将外存中的某个进程的地址空间读入到内存中(换入 swap in). 换入换出内容的大小为整个程序的地址空间.
  • 但是程序一般大于一个页,或者几个页,此时换入换出所带来的的开销是很大的

1661143617521.png

🍣5.3.3 交换技术存在的几个问题

  • 交换时机的确定 : 何时需要发生交换? 只当内存空间不够或有不够的危险时换出;
  • 交换区的大小 : 必须足够大以存放所有用户进程的所有内存映像的拷贝, 必须能够对这些内存映像进行直接存取
  • 程序换入时的重定位 : 换出后再换入的内存位置一定要在原来的位置上嘛?(可能出现寻址问题) 最好采用动态地址映射的方法

🍣5.3.4 覆盖与交换的比较

  • 覆盖只能发生在那些相互之间没有调用关系的程序模块之间, 因此程序员必须给出程序内的各个模块之间的逻辑覆盖结构.
  • 交换技术是以在内存中的程序大小为单位进行的, 它不需要程序员给出各个模块之间的逻辑覆盖结构.

换言之, 交换发生在内存中程序与管理程序或操作系统之间, 而覆盖则发生在运行程序的内部.

🍗5.4 虚拟存储技术

  • 如果想在有限容量的内存中,以更小的页粒为单位装入更多更大的程序,可以采用自动虚拟存储技术

在内存不够用的情形下, 可以采用覆盖技术和交换技术, 但是 :

  • 覆盖技术 : 需要程序要自己把整个程序划分为若干个小的功能模块, 并确定各个模块之间的覆盖关系, 增加了程序员的负担.
  • 交换技术 : 以进程作为交换的单位, 需要把进程的整个地址空间都换入换出, 增加了处理器的开销.

🍣5.4.1 目标

  • 像覆盖技术那样, 不是把程序的所有内容都放在内存中, 因而能够运行比当前的空闲内存空间还要大的程序. 但做的更好, 由操作系统自动来完成, 无需程序员的干涉.
  • 像交换技术那样, 能够实现进程在内存与外存之间的交换, 因而获得更多的空闲内存空间. 但做的更好, 只对进程的部分内容在内存和外存之间进行交换.(交换技术是以进程为单位,进行换入和换出)

P3只是部分用到的放进内存中,其他数据放到硬盘上
1661143676783.png

虽然处理是自动的,不需要程序介入,但是仍然有要求(程序的局部性原理)

  • 程序的局部性原理(principle of locality) : 指程序在执行过程中的一个较短时期, 所执行的指令地址和指令的操作数地址, 分别局限于一定的区域.

    • 时间局部性 : 一条指令的一次执行和下次执行, 一个数据的一次访问和下次访问都集中在一个较短时期内 ;
    • 空间局部性 : 当前指令和邻近的几条指令, 当前访问的数据和邻近的几个数据都集中在一个较小区域内.

程序的局部性原理表明, 从理论上来说, 虚拟存储技术是能够实现的. 而且在实现了以后应该是能够取得一个满意的效果.

🍣5.4.2 实例

题目描述 :
页面大小为4k, 分配给每个进程的物理页面是1. 
在一个进程中, 定义了如下的二维数组 int A[1024][1024]. 该数组按行存放在内存, 每一行放在一个页面中.
考虑一下程序的编写方法对缺页率的影响?

程序编写方法1 : (发生了1024*1024次缺页中断)
for(j = 0; j < 1024; j++)
        for(i = 0; i < 1024; i++)
                A[i][j] = 0;

程序编写方法2 : (发生了1024次缺页中断)
for(i = 0; i < 1024; i++)
        for(j = 0; j < 1024; j++)
                A[i][j] = 0;
  • 要实现高效的虚拟内存管理,除了操作系统硬件外,还需要程序具有局部性

🍣5.4.3 虚拟技术-基本概念

  • 可以在页式或段式内存管理的基础上实现

    • 在装入程序时, 不必将其全部装入内存, 而只需将当前需要执行的部分页面或段装入到内存中, 就可以让程序开始执行;
    • 在程序执行过程中, 如果需执行的指令或访问的数据尚未在内存中(称为缺页或缺段), 则由处理器通知操作系统将相应的页面或段调入到内存, 然后继续执行程序;
    • 另一方面, 操作系统将内存中暂时不使用的页面或段调出保存在外存上, 从而腾出更多空闲内存空间存放将要装入的程序以及将要调入的页面或段.

🍣5.4.4 虚拟技术-基本特征

  • 大的用户空间 : 通过把物理内存和外存相结合, 提供给用户的虚拟内存空间通常大于实际的物理内存, 即实现了这两者的分离. 如32位的虚拟地址理论上可以访问4GB, 而可能计算机上仅有256M的物理内存, 但硬盘容量大于4GB.
  • 部分交换 : 与交换技术相比较, 虚拟存储的调入和调出是对部分虚拟地址空间进行的;
  • 不连续性 : 物理内存分配的不连续性, 虚拟地址空间使用的不连续性.

🍣5.4.5 虚拟技术-虚拟页式内存管理(具体实现)

页表 : 完成逻辑页到物理页帧的映射

  • 根据页号去页表中寻找索引, 先查看 resident bit 是否为0, 0表示不存在, 1表示映射关系存在, 获得帧号加上原本的偏移, 获得了物理地址.

1661143738550.png

  • 大部分虚拟存储系统都采用虚拟页式存储管理技术, 即在页式存储管理的基础上, 增加请求调页和页面置换功能.
  • 基本思路

    • 当一个用户程序要调入内存运行时, 不是将该程序的所有页面都装入内存, 而是只装入部分的页面, 就可启动程序运行.
    • 在运行的过程中, 如果发现要运行的程序或要访问的数据不再内存, 则向系统发出缺页的中断请求, 系统在处理这个中断时, 将外存中相应的页面调入内存, 使得该程序能够继续运行.

页表表项
1661143843792.png

  • 驻留位 : 表示该页是在内存中还是在外存.
  • 保护位 : 表示允许对该页做何种类型的访问, 如只读, 可读写, 可执行等
  • 修改位 : 表示此页在内存中是否被修改过. 当系统回收该物理页面时, 根据此位来决定是否把它的内容写回外存
  • 访问位 : 如果该页被访问过(包括读写操作), 则设置此位. 用于页面置换算法.

1661143885939.png

缺页中断处理过程

  1. 如果在内存中有空闲的物理页面, 则分配一物理页帧f, 然后转第4步; 否则转到第2步;
  2. 采用某种页面置换算法, 选择一个将被替换的物理页帧f, 它所对应的逻辑页为q, 如果该页在内存期间被修改过, 则需要把它写回外存;
  3. 对q所对应的页表项修改, 把驻留位置为0;
  4. 将需要访问的页p装入到物理页面f当中;
  5. 修改p所对应的页表项的内容, 把驻留位置为1, 把物理页帧号置为f;
  6. 重新运行被中断是指令.

1661143902036.png

在何处保存未被映射的页?

  • 能够简单地识别在二级存储器中的页
  • 交换空间(磁盘或者文件) : 特殊格式, 用于存储未被映射的页面

后备存储(二级存储) :

  • 一个虚拟地址空间的页面可以被映射到一个文件(在二级存储中)的某个位置
  • 代码段 : 映射到可执行二进制文件
  • 动态加载的共享库程序段 : 映射到动态调用的库文件
  • 其他段 : 可能被映射到交换文件(swap file)

虚拟内存性能
1661143942053.png

目录
相关文章
|
1月前
|
算法
虚拟内存管理
虚拟内存管理
29 0
|
3月前
|
Linux
内存学习(五):物理内存组织
内存学习(五):物理内存组织
178 0
|
7天前
|
算法 安全
深入理解操作系统的虚拟内存管理
【4月更文挑战第15天】 在现代计算机系统中,虚拟内存是操作系统一项至关重要的功能,它为程序提供了看似无限且连续的内存空间。本文将探讨操作系统中虚拟内存的基本原理,包括分页机制、地址转换以及页面置换算法等关键技术。通过对这些技术的深入分析,我们能够更好地理解操作系统如何高效地管理有限的物理内存资源,并确保多个进程能共享和交换内存,同时减少内存碎片问题。
|
18天前
|
算法 安全
探索现代操作系统中的虚拟内存管理
【4月更文挑战第5天】 在本文中,我们深入剖析了现代操作系统中的一个关键组件——虚拟内存管理。我们将探讨其设计原理、实现机制以及它如何提升了多任务处理的效率和系统的稳定性。通过对比分析不同的内存管理策略,本文旨在为读者提供一个全面而深刻的视角,以理解虚拟内存对现代计算技术发展的重要性。
|
14天前
|
人工智能 缓存 算法
深入理解操作系统内存管理:从虚拟内存到物理内存的映射
【4月更文挑战第8天】 在现代操作系统中,内存管理是核心功能之一,它负责协调和管理计算机的内存资源,确保系统稳定高效地运行。本文深入探讨了操作系统内存管理的关键概念——虚拟内存和物理内存的映射机制。通过剖析分页系统、分段机制和虚拟内存地址转换过程,文章旨在为读者提供一个清晰的理解框架,同时讨论了内存管理的优化技术及其对系统性能的影响。此外,还简要介绍了内存碎片问题以及垃圾回收机制的重要性,并展望了未来内存管理技术的发展趋势。
|
14天前
|
存储 缓存 监控
Linux内存和硬盘空间管理技巧
了解Linux内存和硬盘管理技巧,提升系统性能和稳定性。使用`free`, `top`, `vmstat`监控内存,通过`sync`, `echo 1 &gt; /proc/sys/vm/drop_caches`清理缓存。利用Swap分区释放内存。借助`df`, `du`检查硬盘空间,清理无用文件,使用`clean-old`, `gzip`, `tar`压缩归档。查找大文件用`find`和`du`,确保
33 0
|
1月前
|
缓存 安全 算法
探索现代操作系统的虚拟内存管理
【2月更文挑战第30天】 在当今数字化时代,操作系统的高效运行对计算机性能至关重要。其中,虚拟内存管理作为一项关键技术,它不仅解决了物理内存不足的问题,还提供了程序运行的逻辑地址空间,保障了多任务环境下的内存安全与隔离。本文将深入剖析现代操作系统中虚拟内存管理的机制,包括分页、分段、请求调页等技术,并探讨其对系统性能和稳定性的影响。通过理解这些原理,我们能够更好地优化系统配置,提升用户体验。
|
1月前
|
存储 算法 内存技术
深入理解操作系统内存管理:从虚拟内存到物理内存
【2月更文挑战第30天】 在现代计算机系统中,操作系统的内存管理是确保系统高效稳定运行的关键组成部分。本文将深入探讨操作系统内存管理的复杂世界,特别是虚拟内存和物理内存之间的关联与转换机制。通过分析分页系统的工作原理、虚拟地址空间的结构以及页面置换算法,文章旨在为读者提供一个清晰的框架,以理解内存管理在操作系统中的重要性和实现细节。
|
1月前
设置虚拟内存
设置虚拟内存
45 1
|
4月前
|
存储 缓存 算法
操作系统——虚拟内存管理
早期程序直接运行在物理内存上,直接操作物理内存,这种方式存在几个问题: 地址空间不隔离,程序操作相同地址空间会造成相互影响甚至崩溃,安全性也得不到保障 使用效率低:没有特别好的策略保证多个进程对超过物理内存大小的内存需求的满足 程序运行地址不确定:程序运行时都需要分配空闲区域,而空闲区域不确定,因而不能确定程序被放在什么位置,那么其中的数据、函数等位置都是不确定的,会带来一些重定位的问题 内存管理主要就是为了解决以上三个问题的。