• 10个超级棒的Awk命令


    Awk命令是处理数据的强大工具。它获取输入数据,对其进行操作,并在标准输出中给出结果。可以对文件的行和列执行各种操作。

    要有效地处理数据,了解“awk”命令的基本要素是非常重要的,这篇文章将涵盖“awk”命令的关键特性。让我们先检查语法:

    $ awk [options] [file]

    下表列出了一些常用的选项:

    选项 说明
    -F To specify a file separator
    -f 指定包含“awk”脚本的文件
    -v  指定变量

    让我们看一些有关“ awk”命令用法的示例,为了演示,我新建了一个文本文件,名称为linuxmi.com.txt:

    1、如何使用awk命令打印文件的列?

    “ awk”命令可用于获取文本文件的特定列。 要打印文件的内容,请使用:

    linuxmi@linuxmi:~/www.linuxmi.com$ cat linuxmi.com.txt

    现在,打印文件的第二列,使用:

    linuxmi@linuxmi:~/www.linuxmi.com$ awk ‘{print $2}’ linuxmi.txt

    要打印多个字段,使用命令:

    linuxmi@linuxmi:~/www.linuxmi.com$ awk ‘{print $1,$2,$3}’ linuxmi.txt

    如果你不使用逗号“,”,那么输出将没有空格:

    linuxmi@linuxmi:~/www.linuxmi.com$ awk ‘{print $1$2$3}’ linuxmi.txt

    2、如何使用正则表达式与awk命令:

    为了匹配字符串或任何表达式,我们使用斜杠” // “,例如,如果你想打印正在学习”lishi”的人的名字,那么使用:

    linuxmi@linuxmi:~/www.linuxmi.com$ awk ‘/历史/{print $2}’ linuxmi.txt

    输出清楚地表明,只有“张三”和“方咪”正在学习“历史”课程。

    3、如何通过“awk”命令使用关系表达式:

    为了匹配特定字段的内容,可以使用关系表达式。要将任何字符串或表达式与字段进行匹配,请指示该字段,并使用比较符“〜”与以下命令中显示的模式进行比较:

    linuxmi@linuxmi:~/www.linuxmi.com$ awk ‘$3 ~/语/ {print $2}’ linuxmi.txt

    上面的输出显示第2列中的每个字段与第3列中包含“语”的每个字段的对比。

    要获得上述命令的相反输出,请使用“! ~”运算符:

    linuxmi@linuxmi:~/www.linuxmi.com$ awk ‘$3!~/语/ {print $2}’ linuxmi.txt

    为了进行比较,我们还可以使用大于“>”,小于“ <”和等于“ =”的运算符:

    linuxmi@linuxmi:~/www.linuxmi.com$ awk ‘$4>81 {print $2}’ linuxmi.txt

    输出显示了获得81分以上得分的人员的姓名。

    4、如何通过awk命令使用范围模式:

    范围也可以用于搜索;只需使用逗号“,”来分隔范围,如下面提到的命令所示:

    linuxmi@linuxmi:~/www.linuxmi.com$ awk ‘/李四/,/陈明/ {print $3}’ linuxmi.txt

    输出显示第2列中从“李四”到“陈明”之间的课程。请参见下面的示例:

    linuxmi@linuxmi:~/www.linuxmi.com$ awk ‘$4==87,$4==91 {print $2}’ linuxmi.txt

    输出显示第2列中人员的姓名,第4列中标记“ 87到91”的范围。

    5、如何使用逻辑运算符组合模式:

    使用逻辑运算符(例如OR“ ||”,“ &&&”)可以组合模式进行搜索。使用以下命令

    linuxmi@linuxmi:~/www.linuxmi.com$ awk ‘$4>81 && $6>0.4 {print $2}’ linuxmi.txt

    上面的命令将在第四个字段上打印大于81的人名,在第六个字段上打印大于0.4的人名。并且只有两个记录满足条件。

    6、awk命令的特殊表达式:

    有两个特殊表达式,“ BEGIN”和“ END”:

    开始:在处理数据之前执行操作

    结束:在处理完数据后执行一项操作

    linuxmi@linuxmi:~/www.linuxmi.com$ awk ‘BEGIN {print “处理已经开始”}; {print $2}; END {print “处理已结束”}’ linuxmi.txt

    7、awk命令的有用的内置变量:

    awk命令具有各种有助于数据处理的变量:

    变量 说明
    NF 它给出了数据中字段的数量
    NR 给出当前记录的编号
    FILENAME 显示当前正在处理的文件的名称
    FS 和 OFS 字段分隔符和输出字段分隔符
    RS 和 ORS 分离记录和输出记录分隔符

    示例:

    linuxmi@linuxmi:~/www.linuxmi.com$ awk ‘END{print “文件名是 “, FILENAME, “有”, NF, “个字段和”, NR, “个记录”}’ linuxmi.txt

    我们使用“ END”,但是如果使用“ BEGIN”,则输出将给出0个字段和0个记录。

    8、如何更改记录分隔符:

    记录中的默认分隔符通常为空格;如果有逗号“,”或点“。”作为字段分隔符,然后将“ FS”选项与分隔符一起使用。

    我们再来看一个文件,其中的数据字段之间用逗号“:”隔开:

    linuxmi@linuxmi:~/www.linuxmi.com$ cat linuxmi.txt
    linuxmi@linuxmi:~/www.linuxmi.com$ awk ‘BEGIN {FS=”:”}{print $2}’ linuxmi.txt

    由于文件的分隔符是冒号,但是“ awk”命令甚至对此类文件也很有用,因此只需使用“ FS”选项即可。

    也可以使用“ -F”:

    linuxmi@linuxmi:~/www.linuxmi.com$ awk -F “:” ‘{print $2}’ linuxmi.txt

    默认记录分隔符为“换行符”,并将记录分隔符设置为“:”,请使用:

    linuxmi@linuxmi:~/www.linuxmi.com$ awk ‘BEGIN{RS=”:”}{print $1}’ linuxmi.txt

    9、Awk Actions:

    Awk Actions是由“{}”括号括起来的小程序,它有多个用分号“;”分隔的语句。

    使用“ awk”命令最常用的语句是“ print”语句。例如,要打印每条记录的文本,请在引号中使用文本字符串:

    linuxmi@linuxmi:~/www.linuxmi.com$ awk ‘{print “Linux迷 www.linuxmi.com,” $2}’ linuxmi.com.txt

    让我们使用awk执行简单的求和运算:

    linuxmi@linuxmi:~/www.linuxmi.com$ awk ‘{sum += $4} END {printf “%d
    ”, sum}’ linuxmi.com.txt

    10、创建awk程序:

    让我们从“ awk”编程开始,下面给出的编程只是在做乘法:

    ### Linux迷 www.linuxmi.com ###
    ### Linux迷 www.linuxmi.com ###
    ### Linux迷 www.linuxmi.com ###
    BEGIN {
    i=2
    while(j<4)
    {
    print “The multiplication of 2 with” j ” is ” i*j;
    j++
    }
    }

    用“linuxmi.awk”的名称保存程序并运行,打开终端并输入:

    linuxmi@linuxmi:~/www.linuxmi.com$ awk -f linuxmi.awk

    总结:

    “awk”命令是一种方便的命令,用于处理,扫描文本文件的数据,例如分隔文件的任何特定字段;我们使用“ awk”命令。它使从文本文件中以任何形式或模式搜索任何内容变得更加容易。在本指南中,我们了解“ awk”命令的基本知识及其用法。 “ awk”命令可验证数据,生成报告,甚至解析文件。使用简单的命令“ awk”还可以使用户编写微型程序来更有效地处理数据。

    转自https://www.linuxmi.com/10-awk-mingling.html

  • 相关阅读:
    随笔记:目录已在,但是导入时报ModuleNotFoundError: No module named 'config'
    随笔记:fixture的使用
    python随笔:os.path中的realpathdirnamejoin的学习
    01-移动营销设计-认识H5与广告
    Java web开发 01 入门知识
    Java 12网络编程
    java09 面向对象,封装,继承,多态
    java08 数组与集合
    java07 数组 与 开发工具IntelliJ IDEA 安装 汉化
    java06 顺序结构 选择判断结构 与循环语句
  • 原文地址:https://www.cnblogs.com/cangqinglang/p/14661246.html
Copyright © 2020-2023  润新知