linux命令随记

1.当再Hadoop平台上跑代码的时候，可能会发现有些job是需要被kill重新跑的，此刻，如果一个一个手动去删除会很缓慢，此刻需要使用一个简单的脚本来实现自动全部删除操作：

for i in `hadoop job -list | grep -w tvapk| awk '{print $1}' | grep job_`;
do hadoop job -kill $i;
done

----------------------------------------------------

上述命令中，grep －w tvapk的意思是精确定位是tvapk用户所带来的job，然后利用awk打印出，同时由于job都是同样的样式，循环执行删除即可。

2.有些时候我们在客户端操作代码，一旦客户端断网或者其他原因导致不能使用，此刻需要用到了Linux中的重定向知识：

先说一下linux重定向：
0、1和2分别表示标准输入、标准输出和标准错误信息输出，可以用来指定需要重定向的标准输入或输出。
在一般使用时，默认的是标准输出，既1.当我们需要特殊用途时，可以使用其他标号。例如，将某个程序的错误信息输出到log文件中：./program 2>log。这样标准输出还是在屏幕上，但是错误信息会输出到log文件中。
另外，也可以实现0，1，2之间的重定向。2>&1：将错误信息重定向到标准输出。
Linux下还有一个特殊的文件/dev/null，它就像一个无底洞，所有重定向到它的信息都会消失得无影无踪。这一点非常有用，当我们不需要回显程序的所有信息时，就可以将输出重定向到/dev/null。

如果想要正常输出和错误信息都不显示，则要把标准输出和标准错误都重定向到/dev/null， 例如：

# ls 1>/dev/null 2>/dev/null

还有一种做法是将错误重定向到标准输出，然后再重定向到 /dev/null，例如：

# ls >/dev/null 2>&1

注意：此处的顺序不能更改，否则达不到想要的效果，此时先将标准输出重定向到 /dev/null，然后将标准错误重定向到标准输出，由于标准输出已经重定向到了/dev/null，因此标准错误也会重定向到/dev/null，于是一切静悄悄:-)

由于使用nohup时，会自动将输出写入nohup.out文件中，如果文件很大的话，nohup.out就会不停的增大，这是我们不希望看到的，因此，可以利用/dev/null来解决这个问题。

nohup ./program >/dev/null 2>log &

如果错误信息也不想要的话：

nohup ./program >/dev/null 2>&1 &

 简单点，如果想让任务在后台上跑起来，同时将原本输出在客户端的数据保存在文件里，可以这样实现：

/usr/bin/nohup /usr/bin/sh  /home/tvapk/xxx.sh >/home/tvapk/log.out 2>&1 &

上述分四个部分，第一部分是nohup命令，第二部分是sh命令，第三部分是sh文件的位置，第四部分是重定向标准输出到一个文件，同时保证该进程在后台运行。