做了什么东西还是要尽快移动到博客上,不然回头看自己写的东西已经看不懂了。。。
凭着回忆+搜资料,把当初写sh脚本的过程写上来。
首先新建一个.sh文件,用vim就可以
在sh的第一行,写上
#!/bin/sh
这是告诉系统,这个文件是脚本文件。一定要有
接下来就可以把它当做一个控制台,你需要在控制台里怎么操作,就可以把命令原样地贴在这里。
例如创建一个文件:
cd ~/Downloads mkdir Geronimo
也可以在sh中运行其他sh脚本:
sh pcapname.sh ~/Downloads/Geronimo
这条命令,就是运行pcapname脚本,并传入路径参数~/Downloads/Geronimo
在pcapname.sh中,$1就是传入的参数,即~/Downloads/Geronimo,如果传入了更多参数,就是$2,$3以此类推
而要对$1文件夹下的所有文件进行操作:
for var in $1/* do echo $var done
不过这里的$var表示整条路径:~/Downloads/Geronimo/filename
所以当需要获取文件名的时候,需要提取字符串。
filepath=${var%.*}
filename=${filepath##*/}
这里的filepath是去除了后缀名的字符串,filename是去除了/左边所有字符串的文件名称。
需要拼接字符串时,如下:
tcpfile=$filepath/${filename}_TCP.txt
引用的字符串需要添加$,而为了不与后面的字符串混淆,在filename外添加{}。
sh中的字符串的截取和拼接可以参考这里
实战部分:
我在linux中使用tranalyzer从流量中提取流量特征,生成_flows.txt文件和_pl_iat.txt文件,使用tawk脚本可以从_flows.txt文件中提取所有的tcp特征。
我的流量在mei1和mei2文件夹中,每个文件夹下有50个子文件夹,包含了50种流量,每个子文件夹下有20个pcap文件
对每种流量,提取出flows,pl_iat,tcp内容,放到三个文件夹内,每个文件夹生成50个.txt文件,每个.txt文件包含了子文件夹的20个pcap文件的特征。
我使用了三个.sh文件层层调用,分别为main.sh,pcapname.sh,extractor.sh
main.sh
#!/bin/sh mkdir /mnt/hgfs/mei/mei1/mei1 mkdir /mnt/hgfs/mei/mei1/mei1/flowsfiles mkdir /mnt/hgfs/mei/mei1/mei1/tcpfiles mkdir /mnt/hgfs/mei/mei1/mei1/pl_iatfiles mkdir /mnt/hgfs/mei/mei2/mei2 mkdir /mnt/hgfs/mei/mei2/mei2/flowsfiles mkdir /mnt/hgfs/mei/mei2/mei2/tcpfiles mkdir /mnt/hgfs/mei/mei2/mei2/pl_iatfiles sh pcapname.sh /mnt/hgfs/mei/mei1 sh pcapname.sh /mnt/hgfs/mei/mei2
这里其实也可以写循环实现,但是当时时间紧急,就用笨办法了,反正不多
pcapname.sh
#!/bin/sh #$1 is the directory of the upper level file of the .pcap file #var is the name of the directory of the .pcap file # ${var#*ww_} remove the prefix, and input it to the extractor.sh for var in $1/* do sh extractor.sh $var ${var#*ww_} $1/${1##*/} done
这里用来获取每个子文件夹的名称,每个文件夹的名称形式是WWW_52PK_com,我需要从中提取52PK关键字
.extractor.sh
#!/bin/sh #$1 is the directory of the .pcap file(don't including the ***.pcap file) #$2 is the name of the directory of the .pcap file(remove the prefix name) #var is the name of the .pcap file for var in $1/* do filepath=${var%.*} filename=${filepath##*/} #cd ~/Downloads/tranalyzer2-0.8.2lm2/tranalyzer2-0.8.2/trunk/tranalyzer2/src/ #./tranalyzer -r $var -w $filepath/ #cd ~/Downloads/tranalyzer2-0.8.2lm2/tranalyzer2-0.8.2/trunk/scripts/tawk/ flowsfile=$filepath/${filename}_flows.txt tcpfile=$filepath/${filename}_TCP.txt pl_iatfile=$filepath/${filename}_pl_iat.txt #./tawk 'tcp()' $flowsfile > $tcpfile #./tawk -t -H '{ # n = split($L2L3L4Pl_Iat,A,";"); # for(i=1;i<=n;i++){ # split(A[i],B,"_"); # printf "%f %d ",B[2],B[1]; # } cp $flowsfile $3/flowsfiles/$2_${flowsfile##*/} cp $tcpfile $3/tcpfiles/$2_${tcpfile##*/} cp $pl_iatfile $3/pl_iatfiles/$2_${pl_iatfile##*/} done
这里用#的地方是我的功能性代码
到这里就结束了