• Windows和Linux的不同换行符导致脚本执行异常


    问题描述

    有一个配置文件 config:

    KAFKA_HOME=/home/wy/dev/kafka_2.13-2.6.0
    BOOTSTRAP_SERVER=127.0.0.1:9092
    

    另有一个使用该配置文件的脚本 list-topics.sh:

    #!/bin/bash
    . config
    
    "$KAFKA_HOME"/bin/kafka-topics.sh --bootstrap-server "$BOOTSTRAP_SERVER" --list
    

    我使用虚拟机Ubuntu挂载Windows分区,执行在Windows环境下编写的脚本,提示:

    wy@ship:/mnt/hgfs/D/projects/kafka-mate/scripts$ ./list-topics.sh 
    /bin/kafka-topics.sh: No such file or directory13-2.6.0
    

    解决

    找了好久的原因,最终注意到config文件的换行符编码为CRLF

    三种换行符(line separator):

    • Windows:CRLF(\r\n)
    • Unix and macOSLinux:LF(\n)
    • CLassic Mac OS:CR(\r),少见

    改为LF后,脚本运行正常。我用的IDEA,在右下角更改:

    image.png

    vim状态栏的[noeol] [dos]是什么意思?

    当config的line separator问CRLF时,vim打开Windows分区上的文件时,状态栏显示[noeol][dos]

    image.png

    当config的line separator问LF时,vim打开Windows分区上的文件时,状态栏显示[noeol]

    image.png

    noeol:no end of line。

    如果是Linux分区上的文件,且line separator为LF时,状态栏不会额外显示。

    以下内容来自:Vim 编辑器底端 [noeol], [dos] 的含义 - Trekshot - 博客园 (cnblogs.com)

    有时使用 Vim 打开一个文件会在窗口底部发现 [noeol], [dos] 提示信息:

    "hello-dos.txt" [noeol][dos] 2L, 10C                          1,1           All
    

    这两个符号有何含义?

    直观上理解,'noeol' 就是 'no end-of-line', 即“没有行末结束符”, Linux 下的文本编辑器(如 Vim)会在每一行 (包括最后一行)末尾添加一个换行符。比如我们在 Debian 下新建一个名为 'hello-unix.txt' 的文本文件,内容如下:

    Hello
    Unix
    

    那么,使用cat -A hello-unix.txt命令可以看到这些换行符:

    ts@TS:~/www/document$ cat -A hello-unix.txt
    Hello$
    Unix$
    ts@TS:~/www/document$
    

    从中可以清楚地看到每行末尾的 '$' 字符,这就是 Linux 下的“行末结束符”。

    下面我们再在 Windows 下创建一个名为 'hello-dos.txt' 记事本文件,内容如下:

    Hello
    DOS
    

    在 Debian 下查看此文件的换行符信息:

    ts@TS:~/www/document$ cat -A hello-dos.txt
    Hello^M$
    DOSts@TS:~/www/document$
    

    同样是两行,每行一个单词,Windows 和 Linux 下的换行符有两个明显不同:

    1. Windows 下的换行符比 Linux 下的多了个 ^M
    2. 最后一行行末没有换行符;

    这两个不同之处也正是 [dos], [noeol] 两个 Flag 信息出现的原因。 Windows 下文本文件每行的换行符为“回车+换行”(CRLF,^M$), 而 Linux 下则仅为 “换行” (LF, $). Vim 发现文本中含有 ^M$换行字符判定为 Windows 下创建的 文件,用 [dos] Flag 提示;Vim 没有在最后一行发现换行符,判定此文件不是在 Linux 下创建/编辑,用 [noeol] Flag 提示用户。

    如何消除 [noeol] Flag?

    只需在 Debian 下将该文件重新保存即可,还是上面的 hello-dos.txt 文件,打开它, 不做任何修改直接 :wq保存退出,再查看换行符:

    ts@TS:~/www/document$ cat -A hello-dos.txt
    Hello^M$
    DOS^M$
    ts@TS:~/www/document$
    

    换行符已经追加上去,这里要注意的是追加的是 Windows 下的换行符(回车+换行) ^M$, 而不是 Linux 下的换行符(换行)$, 因为 Vim 已经发现此文件是在 Windows 下创建的([dos] Flag),尽管是在 Linux 下编辑,Vim 也会按照文件创建时所在的操作系统下的换行规则添加换行符。

    如何消除 [dos] Flag?

    有两种简单的方法:

    1. Linux 下提供有两个命令用来进行 Windows 和 Unix 文件的转化:dos2unix unix2dos;
    2. 在 Debian 下使用 touch template.txt 创建一个模板,在 Windows 下创建的任 何文本文件都以此模板为基础;

    Reference

    Vim 编辑器底端 [noeol], [dos] 的含义 - Trekshot - 博客园 (cnblogs.com)


    本文同步发布于:

  • 相关阅读:
    switch中局部变量的使用
    boost中regex的使用
    C++发送邮件jwsmpt
    c++编译相关
    一种处理多任务的线程池设计
    ICE的Timer和TimerTask
    bind2nd使用
    关于.NET WebSocket connection to 'ws://xxx' failed: Error during WebSocket handshake: Unexpected response code: 200
    QWrap Selector简介
    围观tangram
  • 原文地址:https://www.cnblogs.com/duanguyuan/p/16126656.html
Copyright © 2020-2023  润新知