系统编程之高级文件IO(九)——存储映射

简介: 系统编程之高级文件IO(九)——存储映射

一、普通读写文件的特点


cpu执行一堆的函数,很耗费cpu资源,而且浪费时间

中间一堆的缓存都是函数从内存开辟的,浪费内存资源,而且数据在各缓存间倒腾时也很耗费时间

面对大量数据时显得很吃力十


二、存储映射读取


0a2653c851af460fa595bd959398a8f1.png


2.1 mmap


系统API最多6个参数

头文件:#include

原型:void *mmap(void *addr, size_t length, int prot, int flags, int fd, off_t offset)


addr:人为指定映射的起始虚拟地址

设置为NULL,表示由内核决定映射的起始虚拟地址,这也是最常见的设置

设置不为NULL,就表示由自己指定,指定的起始虚拟地址必须是虚拟页(4k)的整数倍


length:映射长度,也就是你想对文件映射多长


prot:指定对映射区的操作权限

2d65d23f6d4748949b924e4057485923.png

PROT_EXEC | PROT_READ


flags:向映射区写入了数据,是否将数据立即更新到文件中。——MAP_SHARED:立即更新


2e9b90b2ca334476abebe75bafe6eeaa.png


fd:需要被映射文件的描述符


offset:(偏移量)表示从文件头的offset处开始映射,一般都指定为0,表示从文件头开始映射


返回值:调用成功,返回映射的起始虚拟地址,失败则返回(void *)NULL, errno被设置


2.2 解除映射


头文件:

#include

#include

原型:int munmap(void *addr, size_t length);

addr:映射的起始虚拟位置

length:需要取消的长度

返回值:调用成功返回0,失败则-1,errno被设置


2.3 mmap函数主要用途


将一个普通文件映射到内存中,通常在需要对文件进行频繁读写时使用,这样用内存读写取代I/O读写,以获得较高的性能,节省开销

将特殊文件进行匿名内存映射,可以为关联进程提供共享内存空间:

为无关联的进程提供共享内存空间,一般也是将一。 个普通文件映射到内存中。


2.4 注意事项


如果是个全新的文件,文件大小为0,所以映射区域为0,再往里面拷贝,所以长度和空间都是0

结论:新文件用mmap进行读写操作时不可以的

解决:


ftruncate(fd, size);改变文件的大小

0a2653c851af460fa595bd959398a8f1.png

对于新文件,需要给其扩容

ftruncate(fd, 1024);
ftruncate(fd, strlen(buffer)); //后面不加这句话,截取会长,出现乱码
相关文章
|
1月前
|
数据库
同步IO模型是一种常见的编程模型
【10月更文挑战第5天】同步IO模型是一种常见的编程模型
18 2
|
1月前
|
搜索推荐 索引
【文件IO】实现:查找文件并删除、文件复制、递归遍历目录查找文件
【文件IO】实现:查找文件并删除、文件复制、递归遍历目录查找文件
34 2
|
1月前
|
编解码 Java 程序员
【文件IO】文件内容操作
【文件IO】文件内容操作
45 2
|
1月前
|
存储 Java API
【文件IO】文件系统操作
【文件IO】文件系统操作
40 1
|
2月前
|
Java 大数据 API
Java 流(Stream)、文件(File)和IO的区别
Java中的流(Stream)、文件(File)和输入/输出(I/O)是处理数据的关键概念。`File`类用于基本文件操作,如创建、删除和检查文件;流则提供了数据读写的抽象机制,适用于文件、内存和网络等多种数据源;I/O涵盖更广泛的输入输出操作,包括文件I/O、网络通信等,并支持异常处理和缓冲等功能。实际开发中,这三者常结合使用,以实现高效的数据处理。例如,`File`用于管理文件路径,`Stream`用于读写数据,I/O则处理复杂的输入输出需求。
|
2月前
|
网络协议 Java Linux
高并发编程必备知识IO多路复用技术select,poll讲解
高并发编程必备知识IO多路复用技术select,poll讲解
|
1月前
|
存储 Java 程序员
【Java】文件IO
【Java】文件IO
35 0
|
2月前
|
Linux C语言
C语言 文件IO (系统调用)
本文介绍了Linux系统调用中的文件I/O操作,包括文件描述符、`open`、`read`、`write`、`lseek`、`close`、`dup`、`dup2`等函数,以及如何获取文件属性信息(`stat`)、用户信息(`getpwuid`)和组信息(`getgrgid`)。此外还介绍了目录操作函数如`opendir`、`readdir`、`rewinddir`和`closedir`,并提供了相关示例代码。系统调用直接与内核交互,没有缓冲机制,效率相对较低,但实时性更高。
|
3月前
|
存储 监控 Linux
性能分析之从 IO 高定位到具体文件
【8月更文挑战第21天】性能分析之从 IO 高定位到具体文件
41 0
性能分析之从 IO 高定位到具体文件
|
2月前
crash —— 获取系统的磁盘IO统计数据
crash —— 获取系统的磁盘IO统计数据