一文搞清UNIX/Linux与Windows文件换行符格式差异

简介: 一文搞清UNIX/Linux与Windows文件换行符格式差异
  • 当一个文件在Windows和Linux上交替操作后,经常遇到一些莫名其妙的问题,如shell脚本无法执行,找不到shell脚本等问题,本文j谨就这一问题做一总结,供各位参考;



格式差异


  • 换行符是行尾 (EOL),是一个特殊的字符或字符序列,表示一行文本的结尾和新行的开头;


  • 表示换行符的实际代码因操作系统而异:


– Microsoft Windows,DOS(MS-DOS,PC DOS等)使用CR + LF;


– Unix和类Unix系统使用,包括Linux,OS X,FreeBSD等使用LF;


– MAC系统里,使用CR;


  • CR即ASCII码的0x0D(\r),LF为ASCII码的0x0A(\n),DOS下使用(\r\n),类Unix系统下使用(\n),DOS系统下的’\r’在类Unix系统下会被显示为 ^M。


后文仅以test-dos.sh文件为例来说明,具体内容如下:


#!/bin/bash
echo "Hello World !"


格式影响


直观影响


  • Unix/Mac系统下的文件在Windows里打开的话,所有文字会变成一行(由于Windows下编辑器的处理,这种情况一般不会发生);


  • 而Windows里的文件在Unix/Mac下打开的话,在每行的结尾可能会多出一个^M符号;


功能影响


  • 在windows上编写的shell、python等脚本在Linux上⽆法正常的执⾏,会有 ^M 相关提⽰:


[qxhgd@localhost crlf]$ ./test-dos.sh
-bash: ./test.sh: /bin/bash^M: bad interpreter: No such file or directory


  • 如果在make编译的时候,执行mksh(一个shell文件)可能会有类似下面的提示:


make[3]: ./mksh: Command not found


格式查看


Windows下查看


  • 利用编辑器,如Visual Studio Code、UltraEdit、Notepad2等软件,如在状态栏显示为CR+LF则为Windows格式,如果显示为LF则为Linux格式:




  • 利用支持扩展搜索的编辑器,如Notepad++,查找\r\n:



Linux下查看


  • cat命令


显示^M:


[qxhgd@localhost crlf]$ cat -v test-dos.sh
#!/bin/bash^M
echo "Hello World !"^M


显示Tab:


[qxhgd@localhost crlf]$ cat -T test-dos.sh
#!/bin/bash
^Iecho "Hello World !"


  • od命令


od可以单独使用:


[qxhgd@localhost crlf]$ od -c test-dos.sh
0000000   #   !   /   b   i   n   /   b   a   s   h  \r  \n   e   c   h
0000020   o       "   H   e   l   l   o       W   o   r   l   d       !
0000040   "
0000041


也可以和cat配合使用:


cat test-dos.sh| od -c


  • hexdump命令


[qxhgd@localhost crlf]$ hexdump -c test-dos.sh
0000000   #   !   /   b   i   n   /   b   a   s   h  \r  \n   e   c   h
0000010   o       "   H   e   l   l   o       W   o   r   l   d       !
0000020   "
0000021


  • vim


状态栏下会显示:


“test-dos.sh” [noeol][dos] 2L, 33B


命令模式下执行set ff:


fileformat=dos


  • gedit


– 首先使用gedit打开文件:


[qxhgd@localhost crlf]$ gedit test-dos.sh


– 搜索\r\n,如果搜索到了就表示是DOS格式:



格式修改


Windows下


  • 可以利用编辑器修改,如Visual Studio Code,点击状态栏右下方的CRLF,选择“行尾序列”可修改为LF的格式;


  • 有的编辑器,如Notepad2,有Line Endings可供选择:



  • 利用支持扩展搜索的编辑器,如Notepad++,可将\r\n替换掉:



Linux下


利用特殊工具转换


  • vim


vim命令模式下,执行set ff=unix或set fileformat=unix即可将DOS格式转换为unix格式;


  • dos2unix


需要额外用命令安装,一般的Linux系统不带的;unix2dos与dos2unix作用正相反。


[qxhgd@localhost crlf]$ dos2unix test-dos.sh
dos2unix: converting file test-dos.sh to Unix format ...
[qxhgd@localhost crlf]$ dos2unix -n test-dos.sh test-unix.sh
dos2unix: converting file test-dos.sh to file test-unix.sh in Unix format ...


  • tofrodos


这一组一共两个命令,todos和fromdos,fromdos用来将dos转换成unix格式,todos是用于将unix转换成dos格式的,使用例子如下:


[qxhgd@localhost crlf]$ fromdos test-dos.sh


利用文本处理工具


  • sed


– 转换一个文件:


sed ‘s/^M//’ test-dos.sh> test-unix.sh


– 转换多个文件:


find ./ -type f print0 | xargs -0 sed -i 's/^M$//'


  • vi


– 1、vi test-dos.sh


– 2、:%s/^M//g或:%s/\r//g


– 3、esc退出 :wq保存退出


其中^M 必须是同时按 Ctrl+V+M(按住Ctrl键,然后依次V、M键)或依次按Ctrl + V然后Ctrl + M,表示回车。


  • tr


tr -d "\015" test-dos.sh                  
cat test-dos.sh|tr -d ‘/r' > test-unix.sh 
tr -d '\r' < test-dos.sh > test-unix.sh


  • perl


cat test-dos.sh | perl -pe ‘~s/\r//g’ > test-unix.sh
perl -p -e 's/\r//g' test-dos.sh> test-unix.sh
perl -pi -e 's/\r\n/\n/g' test-dos.sh
相关文章
|
5天前
|
iOS开发 MacOS Windows
|
5天前
|
NoSQL Linux Redis
Redis的介绍,以及Redis的安装(本机windows版,虚拟机Linux版)和Redis常用命令的介绍
Redis的介绍,以及Redis的安装(本机windows版,虚拟机Linux版)和Redis常用命令的介绍
28 0
|
5天前
|
前端开发 Linux iOS开发
【Flutter前端技术开发专栏】Flutter在桌面应用(Windows/macOS/Linux)的开发实践
【4月更文挑战第30天】Flutter扩展至桌面应用开发,允许开发者用同一代码库构建Windows、macOS和Linux应用,提高效率并保持平台一致性。创建桌面应用需指定目标平台,如`flutter create -t windows my_desktop_app`。开发中注意UI适配、性能优化、系统交互及测试部署。UI适配利用布局组件和`MediaQuery`,性能优化借助`PerformanceLogging`、`Isolate`和`compute`。
【Flutter前端技术开发专栏】Flutter在桌面应用(Windows/macOS/Linux)的开发实践
|
5天前
|
Linux Python Windows
Python虚拟环境virtualenv安装保姆级教程(Windows和linux)
Python虚拟环境virtualenv安装保姆级教程(Windows和linux)
|
5天前
|
安全 Unix Linux
【专栏】`rmdir`命令在Linux和类Unix系统中用于删除空目录,不适用于非空目录
【4月更文挑战第28天】`rmdir`命令在Linux和类Unix系统中用于删除空目录,不适用于非空目录。基本语法为`rmdir [options] directory...`,常用选项包括`-p`(递归删除空父目录)和`--ignore-fail-on-non-empty`(忽略非空目录错误)。与`rm -r`相比,`rmdir`更安全,适用于知道目录为空的情况。在自动化脚本和清理构建目录等场景中,`rmdir`能有效管理空目录。使用时确保目录为空,避免误删,必要时结合`ls`和`sudo`检查或提升权限。
|
5天前
|
关系型数据库 MySQL Shell
Windows下的mysql字符集格式修改
在Windows上的MySQL 5.7.17,若安装时未设置字符集,可能导致乱码问题。本文提供了解决方案:首先,通过`mysql -uroot -p`登录并使用`show variables like &#39;%char%&#39;;`查看当前字符集。然后,有两种修改方法:一是使用Shell命令临时修改9个相关属性为utf8;二是永久修改,在my.ini配置文件中将[mysqld]、[client]、[mysql]下的字符集改为utf8。记得重启MySQL服务以应用更改。此外,还提供了修改数据库和表字符集的SQL命令。
|
5天前
|
SQL 监控 安全
Linux&Windows 日志分析 陇剑杯 CTF
Linux&Windows 日志分析 陇剑杯 CTF
|
存储
《UNIXLinux程序设计教程》一2.8 格式I/O
本节书摘来自华章出版社《UNIXLinux程序设计教程》一 书中的第2章,第2.8节,作者:赵克佳 沈志宇,更多章节内容可以访问云栖社区“华章计算机”公众号查看。
1173 0
|
5天前
|
缓存 网络协议 Unix
Linux(UNIX)五种网络I/O模型与IO多路复用
Linux(UNIX)五种网络I/O模型与IO多路复用
116 0