Linux c/c++文件虚拟内存映射

简介: 这篇文章介绍了在Linux环境下,如何使用虚拟内存映射技术来提高文件读写的速度,并通过C/C++代码示例展示了文件映射的整个流程。
  1. 使用虚拟内存映射操作文件可以大大提高向文件之中写入数据的速率
  2. 文件映射虚拟内存编程模型

文件写入模型

  1. 打开文件 open()
  2. 修改文件大小 ftruncate()
  3. 挂载映射 mmap()
  4. 使用虚拟内存 指针方式
  5. 卸载映射 munmap()
  6. 关闭文件 close()
#include <stdio.h>
#include <unistd.h>
#include <fcntl.h>
#include <stdlib.h>
#include <string.h>
#include <sys/mman.h>

struct student{
    int id;
    char name[20];
    int age;
    double score;
};

int main(){
    //1.打开文件
    int fd = open("stu.dat",O_CREAT | O_RDWR);
    if(-1 == fd)
        printf("文件打开失败!\n"),exit(-1);
    else
        printf("文件打开成功!\n");
    //2.修改文件大小
    ftruncate(fd, 3*sizeof(struct student));
    //3.挂载映射
    struct student* p = mmap(NULL,3*sizeof(struct student),PROT_WRITE|PROT_READ,
        MAP_SHARED,fd,0);
    if((void*)-1 == p)
        printf("映射虚拟内存失败:%m\n"),close(fd),exit(-1);
    printf("映射虚拟内存成功!\n");
    //4.使用虚拟内存
    struct student* pp = p;
    pp->id = 1;
    strcpy(pp->name,"张三");
    pp->age = 33;
    pp->score = 1.33;
    pp++;

    pp->id = 2;
    strcpy(pp->name,"李四");
    pp->age = 44;
    pp->score = 1.44;
    pp++;

    pp->id = 3;
    strcpy(pp->name,"王二");
    pp->age = 22;
    pp->score = 1.22;

    printf("数据写入完成!\n");
    //5.卸载映射
    int ret = munmap(p,3*sizeof(struct student));
    if(ret){
        printf("卸载失败\n"),exit(-1);
    }else{
        printf("卸载成功\n");
    }
    //6.关闭文件
    close(fd);

    return 0;
}

文件读取模型

  1. 打开文件 open()
  2. 挂载映射 mmap()
  3. 使用虚拟内存 指针方式
  4. 卸载映射 munmap()
  5. 关闭文件 close()
#include <stdio.h>
#include <unistd.h>
#include <fcntl.h>
#include <stdlib.h>
#include <sys/mman.h>

struct student{
    int id;
    char name[20];
    int age;
    double score;
};

int main(){
    //打开文件
    int fd = open("stu.dat",O_RDONLY);
    if(-1 == fd)
        printf("文件打开失败:\n"),exit(-1);
    printf("文件打开成功:\n");
    //挂载映射
    struct student* p = mmap(NULL,3*sizeof(struct student),PROT_READ,
        MAP_SHARED,fd,0);
    //读取数据
    struct student* pp = p;
    for(int i = 0;i < 3; i++){
        printf("%d:%s:%d:%g\n",pp->id,pp->name,pp->age,pp->score);
        pp++;
    }
    //卸载映射
    munmap(p,3*sizeof(struct student));
    //关闭文件
    close(fd);

    return 0;
}

void* mmap(void *start, size_t length, int prot, int flags, int fd, off_t offset);

参数1: 映射区的开始地址,设置为0(NULL)时由系统决定映射开始地址

参数2: 映射区的长度

参数3: 期望的内存保护方式,不能与文件的打开模式冲突,它的值可以是下面值的组合

PROT_EXEC     //映射页内容可被执行
PROT_WRITE    //映射页可被写入
PROT_READ     //映射页可被读取
PROT_NONE     //映射页不可访问

参数4: 指定映射对象的类型,映射选项和映射页是否可以共享,它的值可以是下面值的组合

MAP_FIXED //使用指定的映射起始地址,如果由start和len参数指定的内存区重叠于现存的映射空间,重叠部分将会被丢弃。如果指定的起始地址不可用,操作将会失败。并且起始地址必须落在页的边界上。

MAP_SHARED //与其它所有映射这个对象的进程共享映射空间。对共享区的写入,相当于输出到文件。直到msync()或者munmap()被调用,文件实际上不会被更新。

MAP_PRIVATE //建立一个写入时拷贝的私有映射。内存区域的写入不会影响到原文件。这个标志和以上标志是互斥的,只能使用其中一个。

MAP_DENYWRITE //这个标志被忽略。

MAP_EXECUTABLE //这个标志被忽略。

MAP_NORESERVE //不要为这个映射保留交换空间。当交换空间被保留,对映射区修改的可能会得到保证。当交换空间不被保留,同时内存不足,对映射区的修改会引起段违例信号。

MAP_LOCKED //锁定映射区的页面,从而防止页面被交换出内存。

MAP_GROWSDOWN //用于堆栈,告诉内核VM系统,映射区可以向下扩展。

MAP_ANONYMOUS //匿名映射,映射区不与任何文件关联。

MAP_ANON //MAP_ANONYMOUS的别称,不再被使用。

MAP_FILE //兼容标志,被忽略。

MAP_32BIT //将映射区放在进程地址空间的低2GB,MAP_FIXED指定时会被忽略。当前这个标志只在x86-64平台上得到支持。

MAP_POPULATE //为文件映射通过预读的方式准备好页表。随后对映射区的访问不会被页违例阻塞。

MAP_NONBLOCK //仅和MAP_POPULATE一起使用时才有意义。不执行预读,只为已存在于内存中的页面建立页表入口。

参数5: 文件描述符fd

参数6: 被映射文件的起始映射位置(即文件的偏移量)

int munmap(void *start, size_t length);

参数1: mmap()函数返回的地址

参数2: 映射虚拟内存的长度

函数返回值:

成功时: mmap函数返回被映射区的指针, munmap()返回0

失败时: mmap函数返回MAP_FAILED(void*)-1,munmap函数返回-1

相关文章
|
7天前
|
Linux Shell 网络安全
Kali Linux系统Metasploit框架利用 HTA 文件进行渗透测试实验
本指南介绍如何利用 HTA 文件和 Metasploit 框架进行渗透测试。通过创建反向 shell、生成 HTA 文件、设置 HTTP 服务器和发送文件,最终实现对目标系统的控制。适用于教育目的,需合法授权。
36 9
Kali Linux系统Metasploit框架利用 HTA 文件进行渗透测试实验
|
1月前
|
存储 缓存 C语言
【c++】动态内存管理
本文介绍了C++中动态内存管理的新方式——`new`和`delete`操作符,详细探讨了它们的使用方法及与C语言中`malloc`/`free`的区别。文章首先回顾了C语言中的动态内存管理,接着通过代码实例展示了`new`和`delete`的基本用法,包括对内置类型和自定义类型的动态内存分配与释放。此外,文章还深入解析了`operator new`和`operator delete`的底层实现,以及定位new表达式的应用,最后总结了`malloc`/`free`与`new`/`delete`的主要差异。
50 3
|
1月前
|
Linux 开发工具 Perl
在Linux中,有一个文件,如何删除包含“www“字样的字符?
在Linux中,如果你想删除一个文件中包含特定字样(如“www”)的所有字符或行,你可以使用多种文本处理工具来实现。以下是一些常见的方法:
41 5
|
1月前
|
安全 Linux 数据安全/隐私保护
在 Linux 系统中,查找文件所有者是系统管理和安全审计的重要技能。
在 Linux 系统中,查找文件所有者是系统管理和安全审计的重要技能。本文介绍了使用 `ls -l` 和 `stat` 命令查找文件所有者的基本方法,以及通过文件路径、通配符和结合其他命令的高级技巧。还提供了实际案例分析和注意事项,帮助读者更好地掌握这一操作。
49 6
|
1月前
|
Linux
在 Linux 系统中,`find` 命令是一个强大的文件查找工具
在 Linux 系统中,`find` 命令是一个强大的文件查找工具。本文详细介绍了 `find` 命令的基本语法、常用选项和具体应用示例,帮助用户快速掌握如何根据文件名、类型、大小、修改时间等条件查找文件,并展示了如何结合逻辑运算符、正则表达式和排除特定目录等高级用法。
89 6
|
1月前
|
存储 编译器 Linux
【c++】类和对象(上)(类的定义格式、访问限定符、类域、类的实例化、对象的内存大小、this指针)
本文介绍了C++中的类和对象,包括类的概念、定义格式、访问限定符、类域、对象的创建及内存大小、以及this指针。通过示例代码详细解释了类的定义、成员函数和成员变量的作用,以及如何使用访问限定符控制成员的访问权限。此外,还讨论了对象的内存分配规则和this指针的使用场景,帮助读者深入理解面向对象编程的核心概念。
86 4
|
26天前
|
缓存 Prometheus 监控
Elasticsearch集群JVM调优设置合适的堆内存大小
Elasticsearch集群JVM调优设置合适的堆内存大小
211 1
|
16天前
|
存储 监控 算法
深入探索Java虚拟机(JVM)的内存管理机制
本文旨在为读者提供对Java虚拟机(JVM)内存管理机制的深入理解。通过详细解析JVM的内存结构、垃圾回收算法以及性能优化策略,本文不仅揭示了Java程序高效运行背后的原理,还为开发者提供了优化应用程序性能的实用技巧。不同于常规摘要仅概述文章大意,本文摘要将简要介绍JVM内存管理的关键点,为读者提供一个清晰的学习路线图。
|
25天前
|
Java
JVM内存参数
-Xmx[]:堆空间最大内存 -Xms[]:堆空间最小内存,一般设置成跟堆空间最大内存一样的 -Xmn[]:新生代的最大内存 -xx[use 垃圾回收器名称]:指定垃圾回收器 -xss:设置单个线程栈大小 一般设堆空间为最大可用物理地址的百分之80
|
26天前
|
Java
JVM运行时数据区(内存结构)
1)虚拟机栈:每次调用方法都会在虚拟机栈中产生一个栈帧,每个栈帧中都有方法的参数、局部变量、方法出口等信息,方法执行完毕后释放栈帧 (2)本地方法栈:为native修饰的本地方法提供的空间,在HotSpot中与虚拟机合二为一 (3)程序计数器:保存指令执行的地址,方便线程切回后能继续执行代码
21 3
下一篇
DataWorks