系统编程之文件IO(八)——缓冲区的设置

简介: 系统编程之文件IO(八)——缓冲区的设置

一、缓冲类型


1.1 全缓冲


缓冲方式要求填满整个缓冲区后才进行1/O系统调用操作


第一次执行I/O操作时,ANSI标准的文件管理函数通过调用malloc函数获得需要使用的缓冲区,默认大小为8192

位置:/usr/include/stdio.h——#define _G_BUFSIZ 8192


1.2 行缓冲


当在输入和输出中遇到换行符时,标准I/O库函数将会执行系统调用操作

当所操作的流涉及一一个终端时(例如标准输入和标准输出),使用行缓冲方式

默认行缓冲区的大小为1024


1.3 无缓冲


标准I/O库不对字符进行缓存,直接调用系统调用

标准出错流stderr通常是不带缓冲区的,这使得出错信息能够尽快地显示出来。


二、清除和设置文件缓冲区


2.1 设置缓冲区函数


setbuf、setvbuf两个函数将使得打开文件后,用户可建立自己的文件缓冲区,而不使用fopen()函数打开文件设定的默认缓冲区。

void setbuf(FILE *stream,char *buf);

buf指出的缓冲区长度由头文件stdio.h中定义的宏BUFSIZE的值决定

当选定buf为空时,setbuf函 数将使的文件I/O不带缓冲

void setvbuf(FILE *stream,char *buf,int type,unsigned size);(经常)

由malloc函数来分配缓冲区。参数size指明了缓冲区的长度(必须大于0),而参数type则表示了缓冲的类型,

_IONBF:不缓冲

_IOLBF:行缓冲

_IOFBF:全缓冲

void main()
{
  //setbuf(stdout, NULL);//取消缓冲区
  stdvbuf(stdout, NULL, _IONBF, 0);
  printf("hello\n");
  while(1);
  //可以输出hello
}
void main()
{
  char *buf = (char *)malloc(sizeof(char) * 20)
  //setbuf(stdout, NULL);//取消缓冲区
  stdvbuf(stdout, buf, _IONBF, 20);
  printf("hello world");
  while(1);
  //可以输出hello world
}


原因:缓冲区不止有hello world,可能还有一些系统自加上去的,所以可以输出,50也可以,但是如果是200,就输出不了,一般是100起步


注意:fread是无缓冲的,所以效率会更高


fwrite有缓冲


2.2 清除文件缓冲区函数


int fflush(FILE *stream);

清除由strem指向的文件缓冲区里的内容。常用于写完些数据后,立即用该函数清除缓冲区,以免误操作时,破坏原来的数据

int flushall; 清除所有打开文件所对应的文件缓冲区。


三、应用场景(优化读写效率,适当调整缓冲区的大小)


如何提高文件的读写效率?

可以对缓冲区进行操作

改成无缓冲,用开销换时间,增大CPU开销,实现文件读写效率

增大缓冲区是减小开销,有可能,浪费

小文件不需要更改,超过几百兆,需要看是缓冲区的


内存的读写速度是远远大于磁盘的读写速度的


相关文章
|
1月前
|
Java Unix Go
【Java】(8)Stream流、文件File相关操作,IO的含义与运用
Java 为 I/O 提供了强大的而灵活的支持,使其更广泛地应用到文件传输和网络编程中。!但本节讲述最基本的和流与 I/O 相关的功能。我们将通过一个个例子来学习这些功能。
156 1
|
5月前
|
XML JSON Go
Go语言中的文件与IO:JSON、CSV、XML处理
本文介绍了 Go 语言中对 JSON、CSV 和 XML 三种常见数据格式的处理方法。通过标准库 `encoding/json`、`encoding/csv` 和 `encoding/xml`,可以实现结构体与数据格式之间的序列化与反序列化。JSON 适合 Web API 和前后端通信,因其清晰易读;CSV 适用于表格数据和轻量级交换;XML 则支持复杂嵌套结构,常用于配置文件和 SOAP 协议。文中提供代码示例,涵盖基本使用、嵌套结构处理及实战建议,帮助开发者高效操作这些格式。
|
5月前
|
Unix Go
Go语言中的文件与IO:文件读写
本文介绍了 Go 语言中文件操作的基础方法,涵盖打开与关闭文件、读取和写入文件内容、追加写入以及复制文件等功能。通过 `os`、`bufio` 和 `io` 等标准库包,提供了高效且灵活的实现方式,如使用 `os.ReadFile` 读取整个文件、`bufio.Scanner` 逐行读取、`os.Create` 创建文件以及 `io.Copy` 复制文件内容。同时强调了错误处理的重要性,例如使用 `defer` 确保文件关闭,并推荐注意文件权限设置(如 UNIX 系统中的 `0644`)。最后以表格形式总结了常用操作及其推荐方法,便于快速查阅和应用。
|
5月前
|
Go 数据处理
Go语言中的文件与IO:bufio 和 scanner
Go 标准库中的 `bufio` 包高效读写功能,适用于文件和数据处理。`bufio.Reader` 支持按行或分隔符读取,`bufio.Writer` 提供高性能写入并需调用 `Flush()` 确保数据写入。`bufio.Scanner` 是处理文本文件(如日志、配置)的利器,可按行、单词等分割内容。本文详解其用法,并给出实践建议,如统计字符数、模拟 `tail -f` 和词频分析等。
|
存储 Java
【IO面试题 四】、介绍一下Java的序列化与反序列化
Java的序列化与反序列化允许对象通过实现Serializable接口转换成字节序列并存储或传输,之后可以通过ObjectInputStream和ObjectOutputStream的方法将这些字节序列恢复成对象。
|
Java 大数据
解析Java中的NIO与传统IO的区别与应用
解析Java中的NIO与传统IO的区别与应用
|
Java 大数据 API
Java 流(Stream)、文件(File)和IO的区别
Java中的流(Stream)、文件(File)和输入/输出(I/O)是处理数据的关键概念。`File`类用于基本文件操作,如创建、删除和检查文件;流则提供了数据读写的抽象机制,适用于文件、内存和网络等多种数据源;I/O涵盖更广泛的输入输出操作,包括文件I/O、网络通信等,并支持异常处理和缓冲等功能。实际开发中,这三者常结合使用,以实现高效的数据处理。例如,`File`用于管理文件路径,`Stream`用于读写数据,I/O则处理复杂的输入输出需求。
685 12
|
Java 数据处理
Java IO 接口(Input)究竟隐藏着怎样的神秘用法?快来一探究竟,解锁高效编程新境界!
【8月更文挑战第22天】Java的输入输出(IO)操作至关重要,它支持从多种来源读取数据,如文件、网络等。常用输入流包括`FileInputStream`,适用于按字节读取文件;结合`BufferedInputStream`可提升读取效率。此外,通过`Socket`和相关输入流,还能实现网络数据读取。合理选用这些流能有效支持程序的数据处理需求。
423 2
|
XML 存储 JSON
【IO面试题 六】、 除了Java自带的序列化之外,你还了解哪些序列化工具?
除了Java自带的序列化,常见的序列化工具还包括JSON(如jackson、gson、fastjson)、Protobuf、Thrift和Avro,各具特点,适用于不同的应用场景和性能需求。
|
缓存 Java
【IO面试题 一】、介绍一下Java中的IO流
Java中的IO流是对数据输入输出操作的抽象,分为输入流和输出流,字节流和字符流,节点流和处理流,提供了多种类支持不同数据源和操作,如文件流、数组流、管道流、字符串流、缓冲流、转换流、对象流、打印流、推回输入流和数据流等。
【IO面试题 一】、介绍一下Java中的IO流