1、后台运行程序,同时又在终端上显示结果
nohup spark-submit --master spark://192.168.10.10:7077 --class collect.M_B_XXXTS --executor-memory 2G --total-executor-cores 4 TSDomainUser-assembly-1.0.jar | tee tmp.txt &
2、定时监控Hadoop上文件内容(先过滤出Hadoop某个目录下最后一个子目录,再用Hadoop cat查看)
watch -n 300 "hadoop fs -ls /tgl/TS/access/ |tail -1 |awk '{print $8"/*"}' | xargs hadoop fs -cat"
watch的整个命令加双引号“”,表示一个整体;awk里的变量符号$、以及拼接符号“”都要转义