shell脚本技巧大全 48个shell技巧

发布时间:2020-03-16编辑:脚本学堂
分享一些shell脚本编程的小技巧,包括获取CPU信息、VI技巧、正则表达式用法等,非常不错的shell编程技巧,感兴趣的朋友值得收藏下。

本节内容:
shell/ target=_blank class=infotextkey>shell脚本技巧

学习linux shell编程的朋友,会对shell中的文件读取方法、文件权限判断,特别是linux命令的使用技巧,普遍感到难掌握。

如果你也像我一样是linux shell脚本编程方面的新手,那么如下的一些shell技巧,相信会对你有很大的帮助,一起来看看吧。

0. shell 调试
sh -x somefile.sh

在somefile.sh 文件里加上set+x set-x
1,用 && || 简化if else
 

gzip -t a.tar.gz
if [[ 0 == $? ]]; then
    echo "good zip"
else
    echo "bad zip"
fi
 

可以简化为:
 

gzip  -t a.tar.gz && echo "good zip" || echo "bad zip"

2,判断文件非空
 

if [[ -s $file ]]; then
    echo "not empty"
fi

3,获取文件大小
 

stat -c %s $file
stat --printf='%sn' $file
wc -c $file

4,字符串替换
 

${string//pattern/replacement}
a='a,b,c'
echo ${a//,/ /}

5,Contains 子字符串?
 

string="My string"
if [[ $string == *My* ]]; then
    echo "It's there!"
fi

6,rsync备份
 

rsync -r -t -v /source_folder /destination_folder
rsync -r -t -v /source_folder [user@host:/destination_folder

7,批量重命名文件
为所有txt文件加上.bak 后缀:
rename '.txt' '.txt.bak' *.txt

去掉所有的bak后缀:
rename '*.bak' '' *.bak

把所有的空格改成下划线:
 

find path -type f -exec rename 's/ /_/g' {} ;

把文件名都改成大写:
 

find path -type f -exec rename 'y/a-z/A-Z/' {} ;

8,for/while 循环
 

for ((i=0; i < 10; i++)); do echo $i; done
for line in $(cat a.txt); do echo $line; done
for f in *.txt; do echo $f; done
while read line ; do echo $line; done < a.txt
cat a.txt | while read line; do echo $line; done

9,删除空行
 

cat a.txt | sed -e '/^$/d'
(echo "abc"; echo ""; echo "ddd";) | awk '{if (0 != NF) print $0;}'

10,比较文件的修改时间
 

[[ file1.txt -nt file2.txt ]] && echo true || echo false
[[ file1.txt -ot file2.txt ]] && echo true || echo false

11,实现Dictionary结构
 

hput() {
        eval "hkey_$1"="$2"
}
hget() {
        eval echo '${'"hkey_$1"'}'
        }
$ hput k1 aaa
$ hget k1
aaa

12,去掉第二列
 

$echo 'a b c d e f' | cut -d ' ' -f1,3-
$a c d e f

13,把stderr输出保存到变量
 

$ a=$( (echo 'out'; echo 'error' 1>&2) 2>&1 1>/dev/null)
$ echo $a
error

14. 删除前3行
$cat a.txt | sed 1,3d

15. 读取多个域到变量
read a b c <<< "xxx yyy zzz"

16. 遍历数组
 

array=( one two three )
for i in ${array[@]}
        do
echo $i
done

17. 查看目录大小
$ du –sh ~/apps

18. 查看CPU信息
$ cat /proc/cpuinfo

19. date
 

$ date +%Y-%m-%d
2012-12-24
$ date +%Y-%m-%d –date ‘-1 day'
2012-12-23
$ date +%Y-m-%d –date ‘Dec 25'
2011-12-25
$ date +%Y-m-%d –date ‘Dec 25 – 10 days'
2011-12-15

20. 获取路径名和文件名
 

$ dirname ‘/home/lalor/a.txt'
/home/lalor
$ basename ‘/home/lalor/a.txt'
a.txt

21. 并集和交集
comm 可以用来求并集,交集,差集,假设现在有两个文件a和b,它们的内容如下:
 

$cat a
1
3
5
$cat b
3
4
5
6
7
$comm a b
1
        3
    4
        5
    6
    7
$comm -1 -2 a b #交集
3
5
$comm a b | sed 's/t//g' #并集
1
2
3
4
5
6
7
$comm -1 -3 a b | sed 's/t//g' #b-a
4
6
7

22. awk复杂分隔符
 

多字符作分隔符
$ echo "a||b||c||d" | awk -F '[|][|]' '{print $3}'
  c
多种分隔符1
$echo "a||b,#c d" | awk -F '[| ,#]+' '{print $4}'
  d

多种分隔符2
$echo "a||b##c|#d" | awk -F '([|][|])|([#][#])' '{print $NF}'
  c|#d

23. 产生一个随机数
echo $RANDOM

24. 按照模式split 文件
csplit server.log /PATTERN/ -n 2 -s {*} -f server_result -b "%02d.log" -z
/PATTERN/ 用来匹配某一行,分割过程由此开始
{*} 根据匹配,重复执行分割
-s 静默模式
-n 分割后文件名后缀中,数字的个数
-f 分割后的文件名前缀
-b 指定后缀格式

25. 获取文件名或者扩展名
 

var=hack.fun.book.txt
echo ${var%.*}
hack.fun.book
echo ${var%%.*}
hack
echo ${var#.*}
fun.book.txt
echo ${var##.*}
txt

26. 以 root 帐户执行上一条命令。
$sudo !!

其中: * !! 是指上一条命令 * !$ 上一条命令的最后一个参数 * !* 上一条命令的所有参数 * !:3 上一条命令的第3个参数
例如:
 

$ls /tmp/somedir
 ls: cannot access /tmp/somedir: No such file or directory
$mkdir !$
 madir /tmp/somedir

27. 利用 python 搭建一个简单的 Web 服务器,可通过 http://$hostname:8000 访问。
python -m SimpleHTTPServer

28. 在 Vim 中无需权限保存编辑的文件。
:w !sudo tee %

29. 将上一条命令中的 foo 替换为 bar,并执行。
^foo^bar

30. 快速备份或复制文件。
cp filename{,.bak}

31. 将 ssh keys 复制到 user@host 以启用无密码 SSH 登录。
$ssh-copy-id user@host

32. 把 linux 桌面录制为视频。
ffmpeg -f x11grab -s wxga -r 25 -i :0.0 -sameq /tmp/out.mpg

33. man 妙用
man ascii
man test

34. 在 vim 中编辑上一条命令
fc

35. 删除0 字节文件或垃圾文件
find . -type f -size 0 -delete
find . -type f -exec rm -rf {} ;
find . -type f -name "a.out" -exec rm -rf {} ;
find . type f -name "a.out" -delete
find . type f -name "*.txt" -print0 | xargs -0 rm -f