文本文件与二进制文件的编码差别

简介:

网上关于文本文件与二进制文件的文章很多,但遗憾的是,这些文章讲得都比较散。下面我将结合所查到的资料,从多个角度谈谈文本文件与二进制文件。


一、文本文件与二进制文件的定义

       大家都知道计算机的存储在物理上是二进制的,所以文本文件与二进制文件的区别并不是物理上的,而是逻辑上的。这两者只是在编码层次上有差异。

       简单来说,文本文件是基于字符编码的文件,常见的编码有ASCII编码,UNICODE编码等等。二进制文件是基于值编码的文件,可以根据具体应用,指定某个值是什么意思(这样一个过程,可以看作是自定义编码)。

       从上面可以看出文本文件基本上是定长编码的,基于字符,每个字符在具体编码中是固定的,ASCII码是8个比特的编码,UNICODE一般占16个比特。而二进制文件可看成是变长编码的,因为是值编码,多少个比特代表一个值,完全由自定义决定。大家可能对bmp文件比较熟悉,就拿它举例子吧,其头部是固定长度的文件头信息,前2字节用来记录文件为BMP格式,接下来的8个字节用来记录文件长度,再接下来的4字节用来记录bmp文件头的长度。大家可以看出来,其编码是基于值的(不定长的,248字节长的值都有),所以BMP是二进制文件。


二、文本文件与二进制文件的存取

       文本工具打开一个文件的过程是怎样的呢?拿记事本来说,它首先读取文件物理上所对应的二进制比特流(前面已经说了,存储都是二进制的),然后按照所选择的解码方式来解释这个流,然后将解释结果显示出来。一般来说,你选取的解码方式会是ASCII码形式(ASCII码的一个字符是8个比特),接下来,它8个比特8个比特地来解释这个文件流。例如对于这么一个文件流"01000000_01000001_01000010_01000011"(下划线”_”,是我为了增强可读性,而手动添加的),第一个8比特''01000000''ASCII码来解码的话,所对应的字符是字符''A'',同理其它38比特可分别解码为''BCD'',即这个文件流可解释成"ABCD",然后记事本就将这个"ABCD"显示在屏幕上。

       事实上,世界上任何东西要与其他东西通信会话,都存在一个既定的协议,既定的编码规范。人与人之间通过文字联络,如在汉语中,汉字代表生育你的那个人,这就是一种既定的编码。但注意到这样一种情况,汉字在日本文字里有可能是你生育下的那个人,所以当一个中国人A与日本人B之间用这个字进行交流,出现误解就很正常的。用记事本打开二进制文件与上面的情况类似。记事本无论打开什么文件都按既定的字符编码工作(如ASCII码),所以当他打开二进制文件时,出现乱码也是很必然的一件事情了,原因就在于解码和译码不对应。例如文件流''00000000_00000000_00000000_00000001''可能在二进制文件中对应的是一个四字节的整数int 1,但在记事本里解释就变成了"NULL_NULL_NULL_SOH"这四个控制符。

       文本文件的存储与其读取基本上是个逆过程,不再赘述。而二进制文件的存取显然与文本文件的存取差不多,只是编解码方式不同而已,也不再叙述。


三、文本文件与二进制文件的优缺点

       因为文本文件与二进制文件的区别仅仅是编码上不同,所以他们的优缺点就是编码的优缺点,这个找本编码的书来看看就比较清楚了。一般认为,文本文件编码基于字符定长,译码容易些二进制文件编码是变长的,所以它灵活,存储利用率要高些,译码难一些(不同的二进制文件格式,有不同的译码方式)。关于空间利用率,想想看,二进制文件甚至可以用一个比特来代表一个意思(位操作),而文本文件任何一个意思至少是一个字符.

       很多书上还认为,文本文件的可读性要好些,存储要花费转换时间(读写要编译码), 而二进制文件可读性差,存储不存在转换时间(读写不要编解码,直接写值)。这里的可读性是从软件使用者角度来说的,因为我们用通用的记事本工具就几乎可以浏览所有文本文件,所以说文本文件可读性好;而读写一个具体的二进制文件需要一个具体的文件解码器,所以说二进制文件可读性差,比如读bmp文件,必须用读图软件。而这里的存储转换时间应该是从编程的角度来说的,因为有些操作系统如Windows需要对回车换行符进行转换(''/n'',换成''/r/n'',所以文件读写时,操作系统需要一个一个字符的检查当前字符是不是''/n''''/r/n'').这个在存储转换在Linux操作系统中并不需要,当然,当在两个不同的操作系统上共享文件时,这种存储转换又可能出来(Linux系统和Windows系统共享文本文件)


四、C的文本读写和二进制读写

       应该说C的文本读写与二进制的读写是一个编程层次上的问题,与具体的操作系统有关,所以“用文本方式读写的文件一定是文本文件,用二进制读写的文件一定是二进制文件”这类观点是错误的。下面的讲述非明确指出操作系统类型,都暗指WindowsC的文本方读写与二进制读写的差别仅仅体现在回车换行符的处理上。文本方式写时,每遇到一个''/n''(0AH换行符),它将其换成''/r/n''(0D0AH,回车换行),然后再写入文件;当文本读取时,它每遇到一个''/r/n''将其反变化为''/n'',然后送到读缓冲区。正因为文本方式有''/n''--''/r/n''之间的转换,其存在转换耗时。二进制读写时,其不存在任何转换,直接将写缓冲区中数据写入文件。

总地来说,从编程的角度来说,C中文本或二进制读写都是缓冲区与文件中二进制流的交互,只是文本读写时有回车换行的转换。所以当写缓冲区中无换行符''/n''(0AH),文本写与二进制写的结果是一样的,同理,当文件中不存在''/r/n''(0DH0AH)时,文本读与二进制读的结果一样。


下面给出一个小程序来证明前面的观点。

1、编写如下程序。该程序将字符串"12/n3"分别以文本方式和二进制方式写入test1test2,然后再以文本方式读test1,以二进制方式读test2。

#include<stdio.h>
int main()
{
    FILE * fp_text,* fp_binary;
    char write_buf[4]={'1','2','/n','3'};
    char read_buf_text[6],read_buf_binary[6];
    int read_count_text,read_count_binary;
    //未检测打开是否失败
    fp_text=fopen("test1","wt+");
    fp_binary=fopen("test2","wb+");
    fwrite(write_buf,4,1,fp_text);
    fwrite(write_buf,4,1,fp_binary);
    //fflush(fp_text);
    //fflush(fp_binary);
 
    fseek(fp_text,0L,SEEK_SET);//fseek附带了fflush功能
    fseek(fp_binary,0L,SEEK_SET);
    read_count_text=fread(read_buf_text,sizeof(char),5,fp_text);
    read_count_binary=fread(read_buf_binary,sizeof(char),5,fp_binary);
    //加''/0'',便于打印字符串
    read_buf_text[read_count_text]='/0';
    read_buf_binary[read_count_binary]='/0';
    printf("In Text Mode:read_count=%d,string=%s/n",read_count_text,read_buf_text);
    printf("In Binary Mode:read_count=%d,string=%s/n",read_count_binary,read_buf_binary);
    fclose(fp_text);
    fclose(fp_binary);     
    return 0; 
}

2、该程序在VC6.0下编译运行,显示结果如下

In Text Mode:read_count=4,string=12
3                           
//文本方式读test1,读到的字符与原先写入test1的字符一样
In Binary Mode:read_count=4,string=12
3                           
//二进制方式读test2,读到的字符与原先写入test2的字符一样

3、用记事本打开test1test2,结果如下:

test1的内容:
12
3           
//文本方式写入的,有换行效果,参看下面的4
test2的内容:
123         
//二进制方式写入的,无换行效果(记事本对"/r/n"之外的控制字符串无显示效果),参看下面的4

4、用vc6.0Binary方式(二进制方式)打开test1test2,结果如下(用其他二进制读写软件也可以) 

test1的内容:
31 32 0D 0A 33
//十六进制,5个字节,比写入缓冲区多了一个字节,在"/n"(0AH)前插了一个"/r"(0DH)
test2的内容:
31 32 0A 33
//十六进制,4个字节,与写入缓冲区的值一致

5、总结

    从4可以看出,文本方式写时,存在''/n''->''/r/n''的转换,而二进制方式无转换。又从2和4可以推出文本方式读时存在''/r/n''->''/n''的转换,而二进制方式无转换。有兴趣的读者可以尝试以二进制方式读test1或以文本方式读test2,看会出现什么效果。

6.补充说明

上述说明仅适用于Windows,在Unix/Linux中文本方式的读写与二进制方式的读写无差别,不存在回车换行间的转换。UNIX/Linux并没有区分这两种文件,他们对所有文件一视同仁,将所有文件都看成二进制文件。标准I/O库中 主要使用 fread/fwrite来读写二进制文件,而对于文本文件可以使用 fread/fwrite/fgetc/fputc fprintf等等。


转载地址:http://blog.csdn.net/do2jiang/article/details/5863135

目录
相关文章
|
Java Apache
JAVA文件的MD5获取方法
JAVA文件的MD5获取方法
1336 0
|
机器学习/深度学习 传感器 算法
基于多模态感知与深度学习的智能决策体系
本系统采用“端-边-云”协同架构,涵盖感知层、计算层和决策层。感知层包括视觉感知单元(800万像素摄像头、UWB定位)和环境传感单元(毫米波雷达、TOF传感器)。边缘侧使用NVIDIA Jetson AGX Orin模组处理多路视频流,云端基于微服务架构实现智能调度与预测。核心算法涵盖人员行为分析、环境质量评估及路径优化,采用DeepSORT改进版、HRNet-W48等技术,实现高精度识别与优化。关键技术突破包括跨摄像头协同跟踪、小样本迁移学习及实时推理优化。实测数据显示,在18万㎡商业体中,垃圾溢流检出率达98.7%,日均处理数据量达4.2TB,显著提升效能并降低运营成本。
720 7
|
Java Maven
org.yaml.snakeyaml.scanner.ScannerException: while scanning for the next token found character ‘@‘ t
org.yaml.snakeyaml.scanner.ScannerException: while scanning for the next token found character ‘@‘ t
1496 0
|
Java Linux
java基础(3)安装好JDK后使用javac.exe编译java文件、java.exe运行编译好的类
本文介绍了如何在安装JDK后使用`javac.exe`编译Java文件,以及使用`java.exe`运行编译好的类文件。涵盖了JDK的安装、环境变量配置、编写Java程序、使用命令行编译和运行程序的步骤,并提供了解决中文乱码的方法。
1131 2
|
网络协议
配置DHCP Snooping的攻击防范功能示例
本文介绍了通过配置DHCP Snooping功能来防范DHCP攻击的组网需求与实现方法。网络中存在多种针对DHCP的攻击,如仿冒DHCP Server、报文泛洪、仿冒报文及服务拒绝等,这些攻击可能严重影响网络正常运行。为保障DHCP用户服务质量,需在DHCP Relay上配置DHCP Snooping功能。具体包括:配置DHCP转发、启用基本防护功能、限制报文速率、绑定表匹配检查及接入用户数限制等步骤。最后通过命令验证配置结果,确保功能正常运行。
配置DHCP Snooping的攻击防范功能示例
|
安全 网络安全 数据安全/隐私保护
计算机网络实验(思科模拟器Cisco Packet Tracer)——无线路由和防火墙配置
计算机网络实验(思科模拟器Cisco Packet Tracer)——无线路由和防火墙配置
计算机网络实验(思科模拟器Cisco Packet Tracer)——无线路由和防火墙配置
|
人工智能 小程序 API
【一步步开发AI运动小程序】十二、自定义一个运动分析器,实现计时计数01
随着AI技术的发展,AI运动APP如雨后春笋般涌现,如“乐动力”、“天天跳绳”等,推动了云上运动会、线上健身等热潮。本文将指导你从零开始开发一个AI运动小程序,利用“云智AI运动识别小程序插件”,介绍运动识别原理、计量方式及运动分析器基类的使用,帮助你在小程序中实现运动计时和计数功能。下篇将继续探讨运动姿态检测规则的编写。
|
应用服务中间件 nginx Docker
本地通过域名访问虚拟机上nginx的服务、搭建域名访问环境一(反向代理配置)
这篇文章介绍了如何通过域名在本地访问虚拟机上的nginx服务,包括创建nginx容器、修改配置文件、修改本地host文件以及进行访问测试的详细步骤。文章提供了具体的Docker命令来创建并配置nginx容器,展示了配置文件的修改示例,说明了如何在本地系统的hosts文件中添加虚拟机IP和自定义域名,以及如何通过浏览器进行测试访问。
本地通过域名访问虚拟机上nginx的服务、搭建域名访问环境一(反向代理配置)
|
机器学习/深度学习 算法 vr&ar
Theta方法:一种时间序列分解与预测的简化方法
Theta方法整合了两个基本概念:分解时间序列和利用基本预测技术来估计未来的价值。
729 0