• linux cut sort wc sed>vi awk (文本处理)


    cut: 显示切割的行数据

      -f: 选择显示的列 (1: 显示第一列; 1,3: 显示第一列、第三列; 1-3: 显示第一列到第三列) 

      -s: 不显示没有分隔符的行

      -d: 自定义分隔符(' '空格 ‘d’ d字符进行分割)

    sort: 排序文件的行(字典排序(默认),数值排序)

      -n: 按数值排序

      -r: 倒序

      -t: 自定义分隔符

      -k: 选择排序行

      -u: 合并相同行

      -f: 忽略大小写

    sed: 行编辑器(和vi命令有些类似,不需要打开文件进行编辑文本)

      sed[options]'AddressCommnad'file ...,

      -n: 静默模式,不再显示模式空间中的内容(不加此命令,会把文件原本的内容+超找的内容 显示出来,原文件没有修改)

        sed -n "2p" sort.txt 只显示sort.txt 文件第二行的内容

        sed "3d" sort.txt sort.txt 删除第三行的内容全部显示

      -i: 直接修改原文件 

      -e: SCRIPT 可以执行多个脚本

      -f: /PATH/TO/SED_SCRIPT

      -r: 使用正则表达式

    sed: 行编辑器Command

      d: 删除符合条件的行;

      p: 显示符合条件的行

      a: string 在指定的行后面追加新行,内容为string

         可以用于换行

      i: string 在制定的行前面追加新行,内容为sring

        sed -i "/apple/ahahah" sort.txt 查找到apple 并在行添加字符串hahah

        sed -i "/^ha/d" sort.txt: 删除以ha开头的行

      r FILE: 将制定文件的内容添加至符合条件的行处

      w FILE: 将地址指定的范围内的行另存为制定的文件中

      s/pattern/string/修饰符; 查找并替换,默认只替换每行中第一次被模式匹配到的字符串

        g: 行内全局替换

        i: 忽略字符大小写

        sed -i "s/(id:)[0-5](:initdefault:)/152/" inittab 查找id:[0-6]:initdefault: 替换为需要的数据 

        sed "s/(IPADDR=([0-9]?[0-9]?[0-9].){3}).*/155/" ifcfg-eth0: 替换ip地址最后一位数字

     awk : 一个强大的文本分析工具,awk是把文件逐行的读入,(空格,制表符)为默认分隔符将每行切片,切开的部分再进行各种分析处理

    文件:/etc/password

    1、将每行的第一个用户信息打印出来

    awk -F ':' '{print $1}' passwd

    说明:-F 切割方式

        '' 单引号 强引用 不会被bash扩展  如果用双引号 $会被bash引用为获取标量

        '{}' 匿名内部类

           $1:表示第一行 $2:第二行 $0: 正行

    2、将表头(第一列)和shell壳(第七列) 表头加 name 和 shell 进行输出打印,结尾输出 hello和world

      awk -F':' 'BEGIN {print "name shell"} {print $1 " " $7} END{print "hello world"}'  passwd

    说明:BEGIN 只会执行一次方法 在执行匿名内部类之前执行

      END 只会执行一次方法,在匿名内部类执行完之后执行

      awk可以执行多个匿名函数:awk -F':' 'BEGIN {print "name shell"} {print $1 " " $7} {print $0} END{print "hello world" }' passwd

    3、查询行中带有root的单词并打印

      awk '/root/ {print $0}' passwd

    4、显示passwd中的行数、列数及正行内容

      awk -F':' '{print NR" "NF" "$0 }' passwd

    文件:awk.txt  0 manager 1 work

    张三	0	2018-12-12	car	3000
    李四	1	2018-01-12	car	1000
    王五	0	2018-01-12	car	2000
    赵六	1	2018-01-12	car	500
    李四	1	2018-01-12	car	4000
    赵六	1	2018-01-12	car	50000
    

    1、统计每个人1月份的工资 (默认按照制表符、空格分割数据,所以不需要加-F)

      awk '{split($3,data,"-"); if(data[2]=="01"){name[$1]+=$5} } END{for (i in name){print i " " name[i]} }' awk.txt

    2、统计每个人1月份的工资 和角色(默认按照制表符、空格分割数据,所以不需要加-F)

    awk '{split($3, data, "-"); if(data[2]=="01"){name[$1]+=$5; if ($2=="0"){role[$1]="M"} else {role[$1]="W"} } } END{for(i in name){print i " " name[i] " " role[i]} }' awk.txt

    3、使用*.awk 执行awk中的命令

    {
    	split($3, data, "-");
    	if (data[2] == "01") {
    		name[$1] += $5;
    		if ($2 == "0") {
    			role[$1] = "M";
    		} else {
    			role[$1] = "M";
    		}
    	}
    }
    END{
    	for (i in name) {
    		print i "	" name[i] "	" role[i];
    	}
    }

    awk -f awk.awk awk.txt

    可以得到同样的结果 -f 执行awk中的命令

  • 相关阅读:
    HTML5新特性之文件和二进制数据的操作
    HTML5本地存储之IndexedDB
    HTML5新标签之Canvas
    HTML5 Canvas实战之烟花效果
    Asp.NET core/net 5接口返回实体含有long/int64的属性序列后最后几位变为0的解决
    Aero for WTL application
    C++WTL基于MCI的音频播放器源码
    c++ 深拷贝,浅拷贝,赋值操作的调用情况
    发布一个生成按钮图片的工具 c#写的
    贴图:CImage VS Bitmap
  • 原文地址:https://www.cnblogs.com/abel-he/p/9176848.html
Copyright © 2020-2023  润新知