通过Linux设备映射器使用持久内存设备

简介: 通过Linux设备映射器使用持久内存设备

通过Linux设备映射器使用持久内存设备


IO Alignment Considerations


传统的存储设备例如HDDSSDnvmeSAN LUNS等以blocks为单位提供存储功能。Block以字节为单位的可寻址存储单元。传统的硬盘的block大小是512字节。Newer设备通常是4K或者8K,但也可以选择逻辑/模拟的512字节的block

持久内存设备可以通过虚拟内存系统访问,因此IO可以使用系统页大小进行对齐。位于CPU上的内存管理单元(MMU)决定可能的页面大小。Linux支持两种页大小:

Ø 默认页大小,通常4KBLinux通常将其作为页表条目。

Ø 大页:需要内核支持配置CONFIG_HUBETLB_PAGECONFIG_HUGETLBFS。通常称为页面中间目录(PMD),大页大小通常为2MB

页面大小是内存使用和速度之间的折中:

Ø 大页造成空间浪费。

Ø 大内存容量下小页:需要大量的页表条目,从而需要更大内核内存保持页表

Ø 小页可能需要更多时间进行页表遍历。尤其是TLB未命中计数较高情况下。

DDR和持久内存模块之间的容量差异相当大,由于上述原因,内存为TB级的系统上使用较小页面可能会对性能带来负面影响。

使用getconf命令获取系统默认页大小,下面页面大小是4KB

$ getconf PAGE_SIZE

4096

或:

$ getconf PAGESIZE

4096

通过cat /proc/meminfo|grep -i hugepage验证系统是否支持大页:

.....

HugePages_Total: uuu

HugePages_Free:  vvv

HugePages_Rsvd:  www

HugePages_Surp:  xxx

Hugepagesize:    yyy kB

Hugetlb:         zzz kB

.....

根据处理器不同,x86_64架构下至少有两种大页大小:2M1G。如果CPU支持2M,那么会有PSE cpuinfo flag,而1G的有PDPE1GB flag/proc/cpuinfo显示这两种标签的设置。如果这些命令返回非空字符串,那么支持2M

$ grep pse /proc/cpuinfo | uniq

flags           : [...] pse [...]

如果下面命令返回非空字符串,支持1G

$ grep pdpe1gb /proc/cpuinfo | uniq

flags           : [...] pdpe1gb [...]


Verifying IO Alignment


需满足下面条件,DAX文件系统才能支持2M大页:

Ø mmap()至少映射2M

Ø 文件系统块分配的大小至少2M

Ø 文件系统块分配必须与mmap具有相同的对齐方式


原文


https://pmem.io/2018/05/15/using_persistent_memory_devices_with_the_linux_device_mapper.html

相关实践学习
CentOS 7迁移Anolis OS 7
龙蜥操作系统Anolis OS的体验。Anolis OS 7生态上和依赖管理上保持跟CentOS 7.x兼容,一键式迁移脚本centos2anolis.py。本文为您介绍如何通过AOMS迁移工具实现CentOS 7.x到Anolis OS 7的迁移。
目录
相关文章
|
6天前
|
安全 Linux Shell
Linux上执行内存中的脚本和程序
【9月更文挑战第3天】在 Linux 系统中,可以通过多种方式执行内存中的脚本和程序:一是使用 `eval` 命令直接执行内存中的脚本内容;二是利用管道将脚本内容传递给 `bash` 解释器执行;三是将编译好的程序复制到 `/dev/shm` 并执行。这些方法虽便捷,但也需谨慎操作以避免安全风险。
|
15天前
|
Linux 调度
深入理解Linux虚拟内存管理(七)(下)
深入理解Linux虚拟内存管理(七)
32 4
|
15天前
|
存储 Linux 索引
深入理解Linux虚拟内存管理(九)(中)
深入理解Linux虚拟内存管理(九)
15 2
|
15天前
|
Linux 索引
深入理解Linux虚拟内存管理(九)(上)
深入理解Linux虚拟内存管理(九)
22 2
|
15天前
|
Linux
深入理解Linux虚拟内存管理(七)(中)
深入理解Linux虚拟内存管理(七)
21 2
|
15天前
|
Linux
Linux 设备驱动程序(四)
Linux 设备驱动程序(四)
9 1
|
15天前
|
机器学习/深度学习 消息中间件 Unix
深入理解Linux虚拟内存管理(九)(下)
深入理解Linux虚拟内存管理(九)
15 1
|
15天前
|
Linux
深入理解Linux虚拟内存管理(七)(上)
深入理解Linux虚拟内存管理(七)
21 1
|
16天前
|
Linux 开发者
深入理解Linux虚拟内存管理(五)(上)
深入理解Linux虚拟内存管理(五)
15 1
|
16天前
|
算法 Linux
深入理解Linux虚拟内存管理(四)(下)
深入理解Linux虚拟内存管理(四)
11 1

热门文章

最新文章