linux 常用脚本，用到的时候快速修改

google的一篇关于shell的文章

Google Style Guides-Shell Style Guide(翻译)

Shell的一个例子

1.递归遍历递归删除文件夹中的**.exe *.out *~文件（因为要往github上面提交acm的一些代码，而自己的acm目录很分成几个网站的代码，有多级子目录，需要把可执行文件删除）

#!/bin/bash
#递归删除文件夹中的*.exe *.out *~文件
#示例 bash del.sh .
function del_file_from_dir(){
for file in `ls $1`
    do
        if [ -d $1"/"$file ]  
        then
            echo $file " is dir"
            rm -rf $1"/"$file/*.exe $1"/"$file/*.out $1"/"$file/*~
            #
            del_file_from_dir $1"/"$file
        else
            echo $file
        fi
    done
}

del_file_from_dir $1

2.访问网站 下载文件(因为要学习hadoop权威指南，需要天气数据所以写了个脚本，从ftp上下载文件，并把文件处理成符合规范的数据)
从ftp://ftp.ncdc.noaa.gov/pub/data/gsod下载的数据是gsod_1901.tar ~ gsod_2016.tar 的数据

#!/bin/bash
for i in {1901..2016}
do
cd /home/Administrator/ncdc/
wget ftp://ftp.ncdc.noaa.gov/pub/data/gsod/$i/gsod_$i.tar
done

3.要把文件名字变成1901.tar ~ 2016.tar名字的数据，进而压缩成1901.tar.bz2 ~ 2016.tar.bz2类型的数据。把gsod_1901.tar ~ gsod_2016.tar改成1901.tar.bz2 ~ 2016.tar.bz2

#!/bin/bash
#把gsod_*.tar改名为*.tar,并把tar文件压缩成bz2文件
for i in *.tar
do
nowname=${i:5}
#echo "$i"
#echo ${nowname}
mv "$i" "${nowname}"
tar -jcf "${nowname}".bz2 "${nowname}" 
rm -rf "${nowname}"
done

4.要把文件名字变成1901.tar ~ 2016.tar名字的数据，进而压缩成1901.tar.bz2 ~ 2016.tar.bz2类型的数据。把gsod_1901.tar ~ gsod_2016.tar改成1901.tar.bz2 ~ 2016.tar.bz2

• 测试while循环

# 执行命令并且check
# 没执行一次文件翻倍
#/bin/sbin

declare -i COUNTER=0
while ((COUNTER<=5));
do
    let ++COUNTER
    echo $COUNTER
done

• 测试 每次执行main2 -i $file1 -o $file2 >> txtfile.log.txt后file1文件变为原来的2倍，并且比较file1和file2的sha1sum值是否相同。

用到的shell知识点

1. while循环有限次；
2. shell接受命令执行命令的返回值；
3. 字符串截取文件第4节；
4. shell的if else fi判断；
5. shell的变量值声明、初始化、自增；

# 执行命令并且check
# 每执行一次文件翻倍
#/bin/sbin

file1=file.txt
file2=file.txt.out

declare -i COUNTER=0
while ((COUNTER<=10));
do
    runresult=`main2 -i $file1 -o $file2 >> txtfile.log.txt`
    file1_sha1=`sha1sum $file1`
    file2_sha1=`sha1sum $file2`
    file1_sha1=${file1_sha1%% *} #删除空格右边的字符
    file2_sha1=${file2_sha1%% *} #删除空格右边的字符
    echo '第' $COUNTER "次测试" >> txtfile.log.txt
    echo  -n $file1 "与" $file2 "的sha1sum值相同 ？ " >> txtfile.log.txt
    if [ $file1_sha1 == $file2_sha1 ];then
        echo "True" >> txtfile.log.txt
    else
        echo "False" >> txtfile.log.txt
    fi 
    echo '\n' >> txtfile.log.txt
    let ++COUNTER
    rm -rf *.symbol
    rm -rf *.esi
    cat $file1 >> tmp
    cat tmp > $file1
done