Linux内存管理之CMA简介

简介: Linux内存管理之CMA简介

1.概述



在linux驱动开发过程中经常需要使用到连续大块物理内存,尤其是DMA设备。而实际在系统经过长时间的允许之后,物理内存会出现比较严重的碎片化现象,虽然通过内存规整,内存回收等手动可以清理出一段连续的物理内存,但是并不能保证一定能够申请较大连续物理块。最初连续申请较大块物理内存,一般都是只在DMA场景中使用,因此内核专门把物理内存划分出ZONE_DMA专门用于DMA内存申请(当然划分DMA_ZONE还有其他原因,在较早DMA中由于DMA寻址地址限制 只能将一定范围的物理内存),用于解决DMA申请连续物理内存问题。但是随着各种设备驱动出现,对连续物理内存需求也越来越大。因此将所有连续物理内存都做预留出来,很显然如果划分预留出较多内存专门给连续物理内存使用,对内存使用存在较为严重浪费情况,也支持长期发展需求。


为了解决上述问题,三星公司的Michal Nazarewicz 与2010年提出CMA(contiguous memory allocator)The Contiguous Memory Allocator [LWN.net],用于解决连续物理内存申请问题。


reserved-memory 架构包含了预留内存的功能。预留的内存又与内核中的DMA和CMA框架密切相关。


为了从系统地址空间预留内存,设备树须配置预留内存的节点。每个节点定义一个特定的内存空间,并且可以根据内核文档中关于可用于预留内存节点的说明配置不同的参数。然后就可以通过memory-region参数将预留的内存空间分配给特定的设备驱动程序使用。


CMA(Contiguous Memory Allocator)连续内存分配器用于分配大块的连续内存。内存管理系统会根据设备使用情况动态管理CMA区域的页面。


2.配置CMA区域



dts中关于CMA区域的描述如下:


resmem: reserved-memory {
  #address-cells = <2>;
  #size-cells = <2>;
  ranges;
  linux,cma {
    compatible = "shared-dma-pool";
    reusable;
    size = <0 0x3c000000>;
    alloc-ranges = <0 0x40000000 0 0xC0000000>;
    linux,cma-default;
  };
}


在内核启动的dtb解析阶段,需要对这块CMA区域进行范围合法性和reusable属性检查【必须是reusable属性,不能是no-map,no-map用于专有驱动的io remap】。


这里的CMA区域,最终由kernel/dma/contiguous.c注册。其中的rmem_cma_setup函数会读取dts参数并创建CMA区域,从device tree中可以获取该memory range的起始地址和大小,调用cma_init_reserved_mem函数即可以注册一个CMA区域【告知系统起始地址和大小】。


3.初始化CMA区域



CMA区域只是一块特殊的内存区域,最终还是需要由伙伴系统管理。


初始化顺序:


1.memblock

掌握全局内存分布和内存类型,确定哪些memory block的普通内存【memblock_add】,哪些是保留内存【memblock_reserve】,这里的cma就属于保留内存。


然后初始化保留内存【__reserved_mem_init_node】,调用rmem_cma_setup设置CMA区域。


2.cma


cma_declare_contiguous_nid从memblock中划分出满足要求的物理内存用作CMA内存。

setup_arch
  ->bootmem_init
    ->dma_contiguous_reserve
    ->dma_contiguous_reserve_area
      ->cma_declare_contiguous
      ->cma_declare_contiguous_nid


3.加入伙伴系统


现在CMA这块区域已经划分完成,最后还需要将其引入伙伴系统进行内存管理。


最终通过cma_init_reserved_areas->init_cma_reserved_pageblock将其加入到buddy系统中


cma_init_reserved_areas
  ->cma_activate_area
  ->init_cma_reserved_pageblock //将cma内存page中的PG_Reserved清除
    ->set_pageblock_migratetype(page, MIGRATE_CMA)//page设置MIGRATE_CMA标志
    ->__free_pages //加进伙伴系统


MIGRATE_CMA这种迁移类型具有一个重要性质:只有可移动的页面可以从MIGRATE_CMA的pageblock中分配。


当从伙伴系统请求内存的时候,我们需要提供了一个gfp_mask的参数。migrate type有很多中,其中有一个是MIGRATE_MOVABLE类型,被标记为MIGRATE_MOVABLE的page说明该页面上的数据是可以迁移的。也就是说,如果需要,我们可以分配一个新的page,copy数据到这个new page上去,然后释放这个page。而完成这样的操作对系统没有任何的影响。


4.CMA内存申请



CMA内存大都是通过dma_alloc_contiguous进行申请的,其核心是cma_alloc。


过程是:


1.将范围内的页面标记为隔离状态,防止伙伴系统使用

2.扫盲PFN范围可以迁移的页面

3.将老page内容传给新page,完成页面迁移


cma_alloc
  ->alloc_contig_range
  ->start_isolate_page_range //将范围内的页面标记为隔离状态,防止伙伴系统使用
  ->__alloc_contig_migrate_range //扫盲PFN范围可以迁移的页面,进行迁移
    ->migrate_pages  //完成页面迁移,将老page内容传给新page
    ->unmap_and_move


5.CMA debug



debug之前需要开启CONFIG_CMA_DEBUG=y CONFIG_CMA_DEBUGFS=y内核配置开关。


开启之后会在/sys/kernel/debug/cma目录:


# ls /sys/kernel/debug/cma/cma-0/
alloc  base_pfn  bitmap  count  free  maxchunk  order_per_bit  used


参考:

http://www.wowotech.net/memory_management/cma.html

https://blog.csdn.net/weixin_42730667/article/details/123944241

相关文章
|
5月前
|
缓存 监控 Linux
Linux内存问题排查命令详解
Linux服务器卡顿?可能是内存问题。掌握free、vmstat、sar三大命令,快速排查内存使用情况。free查看实时内存,vmstat诊断系统整体性能瓶颈,sar实现长期监控,三者结合,高效定位并解决内存问题。
483 0
Linux内存问题排查命令详解
|
缓存 Linux
linux 手动释放内存
在 Linux 系统中,内存管理通常自动处理,但业务繁忙时缓存占用过多可能导致内存不足,影响性能。此时可在业务闲时手动释放内存。
668 17
|
监控 Linux
如何检查 Linux 内存使用量是否耗尽?这 5 个命令堪称绝了!
本文介绍了在Linux系统中检查内存使用情况的5个常用命令:`free`、`top`、`vmstat`、`pidstat` 和 `/proc/meminfo` 文件,帮助用户准确监控内存状态,确保系统稳定运行。
2480 6
|
9月前
|
缓存 Linux 数据安全/隐私保护
Linux环境下如何通过手动调用drop_caches命令释放内存
总的来说,记录住“drop_caches” 命令并理解其含义,可以让你在日常使用Linux的过程中更加娴熟和自如。
1519 23
|
11月前
|
存储 缓存 算法
JVM简介—1.Java内存区域
本文详细介绍了Java虚拟机运行时数据区的各个方面,包括其定义、类型(如程序计数器、Java虚拟机栈、本地方法栈、Java堆、方法区和直接内存)及其作用。文中还探讨了各版本内存区域的变化、直接内存的使用、从线程角度分析Java内存区域、堆与栈的区别、对象创建步骤、对象内存布局及访问定位,并通过实例说明了常见内存溢出问题的原因和表现形式。这些内容帮助开发者深入理解Java内存管理机制,优化应用程序性能并解决潜在的内存问题。
612 29
JVM简介—1.Java内存区域
|
11月前
|
监控 Linux Python
Linux系统资源管理:多角度查看内存使用情况。
要知道,透过内存管理的窗口,我们可以洞察到Linux系统运行的真实身姿,如同解剖学家透过微观镜,洞察生命的奥秘。记住,不要惧怕那些高深的命令和参数,他们只是你掌握系统"魔法棒"的钥匙,熟练掌握后,你就可以骄傲地说:Linux,我来了!
392 27
|
11月前
|
缓存 监控 算法
JVM简介—2.垃圾回收器和内存分配策略
本文介绍了Java垃圾回收机制的多个方面,包括垃圾回收概述、对象存活判断、引用类型介绍、垃圾收集算法、垃圾收集器设计、具体垃圾回收器详情、Stop The World现象、内存分配与回收策略、新生代配置演示、内存泄漏和溢出问题以及JDK提供的相关工具。
JVM简介—2.垃圾回收器和内存分配策略
|
消息中间件 Linux
Linux中的System V通信标准--共享内存、消息队列以及信号量
希望本文能帮助您更好地理解和应用System V IPC机制,构建高效的Linux应用程序。
480 48
|
11月前
|
存储 编解码 安全
阿里云高性能企业级甄选Intel第八代计算型c8i、通用型g8i和内存型r8i实例简介
计算型c8i、通用型g8i和内存型r8i实例是阿里云推出的高性能企业级甄选Intel第八代云服务器实例,采用CIPU+飞天技术架构,搭载最新的Intel 第五代至强可扩展处理器(代号EMR),性能进一步大幅提升,同时拥有AMX加持的AI能力增强,并在全球范围率先支持TDX机密虚拟机能力,实现了AI增强和全面安全防护的两大特色优势。本文将为您介绍这三个实例规格的性能、适用场景及最新活动价格以及选择指南,以供选择参考。
456 18
|
缓存 Java Linux
如何解决 Linux 系统中内存使用量耗尽的问题?
如何解决 Linux 系统中内存使用量耗尽的问题?
1277 59