系统明明有很多内存,却无法分配出一片大块内存?

简介: 系统明明有很多内存,却无法分配出一片大块内存?

今日问题:系统明明有很多内存,却无法分配出一片大块内存?

这是为什么呢?

这个问题涉及内存管理的一个内容——内存碎片

什么是内存碎片?

内存碎片在Linux很早的时候就已经出现了,了解早期内存碎片产生的历史,有利于我们对它的理解。

假设现在有一块32MB大小的内存,一开始操作系统使用了最小的一块——4MB大小,剩余的内存要留给4个进程使用,如图(a)所示。

进程A使用了操作系统往上的10MB内存,进程B使用了进程A往上的6MB内存,进程C使用了进程B往上的8MB内存,如图(b)所示,:

进程D需要5MB内存,所以剩余的内存不足以装载进程D,这个内存末位就形成了第一个空洞(内存碎片)。假设某个时刻,操作系统需要运行进程D,因为系统中没有足够的内存,所以需要选择一个进程来换出,为进程D腾出足够的空间。假设操作系统选择进程B来换出,这样进程D就装载到了原来进程B的地址空间里,于是产生了第二个空洞,如图(c)所示:

假设操作系统某个时刻需要运行进程B,也需要选择一个进程来换出,假设进程A被换出,那么操作系统中又产生了第三个空洞,如图(d)所示:

随着时间的推移,内存空洞会越来越多,内存的利用率也随之下降,这些内存空洞就是我们常说的内存碎片

看到这,你已经知道了什么是内存碎片,同时还了解了一种内存管理机制——动态分区法。上述举例其实就是动态分区法,操作系统早期使用动态分区法来管理内存。

怎么解决内存碎片化问题?

思路其实很简单:把多个小块内存拼成一个大块内存

早期使用动态分区法的操作系统,为了解决碎片化问题,就是动态地移动进程,使得进程占用的空间是连续的,并且所有的空闲空间也是连续,这样就把多个小内存块拼起来了。但是缺点也非常明显,进程的迁移需要耗费大量的时间

内碎片和外碎片

内存碎片分两种:内碎片外碎片

内碎片:分配给程序的内存但未被利用的部分

外碎片:系统无法利用的小内存块(如上述动态分区法产生的碎片)

如今操作系统使用分页或分段机制来管理内存,但仍不可避免地会产生一些内存碎片。

为了解决内碎片和外碎片问题,Linux引入了两个东西:伙伴系统slab

伙伴系统用于解决外碎片问题,slab用于解决内碎片问题。

伙伴系统和slab也是内存管理中比较核心的内容,有兴趣的可以去研究一下。

总结

所以,当系统有很多内存,但无法分配出一片大块内存时,就是因为产生了很多内存碎片,导致系统中有很多不连续的小块内存,表面上看系统空闲内存很多,但实际都是一些零散的内存。

猜你喜欢:

实战 | RISC-V Linux入口地址2M预留内存优化

RISC-V Linux启动之页表创建分析

RISC-V Linux汇编启动过程分析

写给新手的MMU工作原理

OpenSBI三种固件的区别

RISC-V 入门笔记(新手必看!)

教你在QEMU上运行RISC-V Linux

相关文章
|
2月前
|
缓存 Java Linux
如何解决 Linux 系统中内存使用量耗尽的问题?
如何解决 Linux 系统中内存使用量耗尽的问题?
223 48
|
1月前
|
机器学习/深度学习 人工智能 缓存
【AI系统】推理内存布局
本文介绍了CPU和GPU的基础内存知识,NCHWX内存排布格式,以及MNN推理引擎如何通过数据内存重新排布进行内核优化,特别是针对WinoGrad卷积计算的优化方法,通过NC4HW4数据格式重排,有效利用了SIMD指令集特性,减少了cache miss,提高了计算效率。
55 3
|
1月前
|
监控 Java Android开发
深入探索Android系统的内存管理机制
本文旨在全面解析Android系统的内存管理机制,包括其工作原理、常见问题及其解决方案。通过对Android内存模型的深入分析,本文将帮助开发者更好地理解内存分配、回收以及优化策略,从而提高应用性能和用户体验。
|
1月前
|
机器学习/深度学习 人工智能 算法
【AI系统】内存分配算法
本文探讨了AI编译器前端优化中的内存分配问题,涵盖模型与硬件内存的发展、内存划分及其优化算法。文章首先分析了神经网络模型对NPU内存需求的增长趋势,随后详细介绍了静态与动态内存的概念及其实现方式,最后重点讨论了几种节省内存的算法,如空间换内存、计算换内存、模型压缩和内存复用等,旨在提高内存使用效率,减少碎片化,提升模型训练和推理的性能。
73 1
|
2月前
|
监控 Java Android开发
深入探讨Android系统的内存管理机制
本文将深入分析Android系统的内存管理机制,包括其内存分配、回收策略以及常见的内存泄漏问题。通过对这些方面的详细讨论,读者可以更好地理解Android系统如何高效地管理内存资源,从而提高应用程序的性能和稳定性。
98 16
|
2月前
|
存储 C语言
C语言如何使用结构体和指针来操作动态分配的内存
在C语言中,通过定义结构体并使用指向该结构体的指针,可以对动态分配的内存进行操作。首先利用 `malloc` 或 `calloc` 分配内存,然后通过指针访问和修改结构体成员,最后用 `free` 释放内存,实现资源的有效管理。
215 13
|
2月前
|
Linux
如何在 Linux 系统中查看进程占用的内存?
如何在 Linux 系统中查看进程占用的内存?
|
3月前
|
运维 JavaScript Linux
容器内的Nodejs应用如何获取宿主机的基础信息-系统、内存、cpu、启动时间,以及一个df -h的坑
本文介绍了如何在Docker容器内的Node.js应用中获取宿主机的基础信息,包括系统信息、内存使用情况、磁盘空间和启动时间等。核心思路是将宿主机的根目录挂载到容器,但需注意权限和安全问题。文章还提到了使用`df -P`替代`df -h`以获得一致性输出,避免解析错误。
|
2月前
|
缓存 Prometheus 监控
Elasticsearch集群JVM调优设置合适的堆内存大小
Elasticsearch集群JVM调优设置合适的堆内存大小
501 1
|
1月前
|
存储 监控 算法
深入探索Java虚拟机(JVM)的内存管理机制
本文旨在为读者提供对Java虚拟机(JVM)内存管理机制的深入理解。通过详细解析JVM的内存结构、垃圾回收算法以及性能优化策略,本文不仅揭示了Java程序高效运行背后的原理,还为开发者提供了优化应用程序性能的实用技巧。不同于常规摘要仅概述文章大意,本文摘要将简要介绍JVM内存管理的关键点,为读者提供一个清晰的学习路线图。

相关实验场景

更多