1.shell内置的字符串操作
| 表达式 | 含义 |
|---|---|
| ${#string} | $string的长度 |
| ${string:position} | string中，从位置$position开始提取字符串 |
| ${string:position:length} | string中，从位置$position开始提取长度为length的字符串 |
| ${string#substring} | string中，从头开始匹配substring（最短匹配）并删除，如果没匹配则输出string |
| ${string##substring} | string中，从头开始匹配substring（最长匹配）并删除，如果没匹配则输出string |
| ${string%substring} | 从string结尾开始匹配(最短匹配)并删除，如果没匹配则输出string |
| ${string%%substring} | 从string结尾开始匹配(最长匹配)并删除，如果没匹配则输出string |
| ${string/substring/replacement} | 使用replacement替代第一个substring |
| ${string//substring/replacement} | 使用replacement替代所有sbustring |
| ${string/#substring/replacement} | 如果string的前缀匹配substring，那么用replacement替换substring |
| ${string/%substring/replacement} | 如果string的后缀匹配substring，那么用replacement替换substring |
字符串删除功能： #号代表从开头匹配，%代表从结尾，两个#或者%代表最长匹配
字符串替换功能：一个/代表替换第一个，//则代表全部替换, /#则是开头匹配，/%是结尾匹配
2.awk使用
awk 内置变量包括：
- FILENAME : 当前输入文件名称
- NR : 当前输入行编号(是指输入行 1，2，3……等)
- NF : 当前输入行的字段编号
- OFS : 输出字段分隔符
- FS : 输入字段分隔符
- ORS : 输出记录分隔符
- RS : 输入记录分隔符
3.sed 使用
sed是一个很好的文件处理工具，本身是一个管道命令，主要是以行为单位进行处理，可以将数据行进行替换、删除、新增、选取等特定工作。
sed命令行格式为：
sed [-nefri] ‘command’ 输入文本
常用选项：
-n∶使用安静(silent)模式。在一般 sed 的用法中，所有来自 STDIN的资料一般都会被列出到萤幕上。但如果加上 -n 参数后，则只有经过sed 特殊处理的那一行(或者动作)才会被列出来。
-e∶直接在指令列模式上进行 sed 的动作编辑；
-f∶直接将 sed 的动作写在一个档案内， -f filename 则可以执行 filename 内的sed 动作；
-r∶sed 的动作支援的是延伸型正规表示法的语法。(预设是基础正规表示法语法)
-i∶直接修改读取的档案内容，而不是由萤幕输出。
常用命令：
a ∶新增， a 的后面可以接字串，而这些字串会在新的一行出现(目前的下一行)～
c ∶取代， c 的后面可以接字串，这些字串可以取代 n1,n2 之间的行！
d ∶删除，因为是删除啊，所以 d 后面通常不接任何咚咚；
i ∶插入， i 的后面可以接字串，而这些字串会在新的一行出现(目前的上一行)；
p ∶列印，亦即将某个选择的资料印出。通常 p 会与参数 sed -n 一起运作～ s ∶取代，可以直接进行取代的工作哩！通常这个 s 的动作可以搭配正规表示法！例如 1,20s/old/new/g 就是啦！
例如文件：ylj，注意选项和命令的位置
删除某行，命令在与
[root@localhost home] # sed '1d' ylj #删除第一行
[root@localhost home] # sed '$d' ylj #删除最后一行
[root@localhost home] # sed '1,2d' ylj #删除第一行到第二行
[root@localhost home] # sed '2,$d' ylj #删除第二行到最后一行
显示某行
. [root@localhost home] # sed -n '1p' ylj #显示第一行
[root@localhost home] # sed -n '$p' ylj #显示最后一行
[root@localhost home] # sed -n '1,2p' ylj #显示第一行到第二行
[root@localhost home] # sed -n '2,$p' ylj #显示第二行到最后一行
使用模式进行查询
[root@localhost home] # sed -n '/home/p' ylj #查询包括关键字home所在所有行
[root@localhost home] # sed -n '/$/p' ylj #查询包括关键字$所在所有行，使用反斜线屏蔽特殊含义
增加一行或多行字符串
[root@localhost home]# cat ylj
Hello!
home is me,welcome to my blog.
end
[root@localhost home] # sed '1a drink tea' ylj #第一行后增加字符串"drink tea"
Hello!
drink tea
home is me,welcome to my blog.
end
[root@localhost home] # sed '1,3a drink tea' ylj #第一行到第三行后增加字符串"drink tea"
Hello!
drink tea
home is me,welcome to my blog.
drink tea
end
drink tea
[root@localhost home] # sed '1a drink tea
or coffee' ylj #第一行后增加多行，使用换行符
Hello!
drink tea
or coffee
home is me,welcome to my blog.
end
代替一行或多行
[root@localhost home] # sed '1c Hi' ylj #第一行代替为Hi
Hi
home is me,welcome to my blog.
end
[root@localhost home] # sed '1,2c Hi' ylj #第一行到第二行代替为Hi
Hi
end
替换一行中的某部分
格式：sed 's/要替换的字符串/新的字符串/g' （要替换的字符串可以用正则表达式）
[root@localhost home] # sed -n '/home/p' ylj | sed 's/home/bird/g' #替换home为bird
[root@localhost home] # sed -n '/home/p' ylj | sed 's/home//g' #删除home
插入
[root@localhost home] # sed -i '$a bye' ylj #在文件ylj中最后一行直接输入"bye"
[root@localhost home]# cat ylj
Hello!
home is me,welcome to my blog.
end
bye
删除匹配行
sed -i '/匹配字符串/d' filename （注：若匹配字符串是变量，则需要“”，而不是‘’。记得好像是）
替换匹配行中的某个字符串
sed -i '/匹配字符串/s/替换源字符串/替换目标字符串/g' filename