一段shell日志分析脚本，使用shell脚本分析Nginx日志蜘蛛爬取记录，按照月份显示nginx日志记录条数，并可以显示蜘蛛种类，非常不错的一段nginx日志分析脚本。
shell版nginx日志蜘蛛爬取查看脚本
使用说明：
使用时，需要修改nginx日志的路径。
如果 更多的蜘蛛 自己在 代码蜘蛛UA数组里加即可。
shell脚本：
复制代码 代码示例:
#!/bin/bash
m="$(date +%m)"
case $m in
"01") m='Jan';;
"02") m='Feb';;
"03") m='Mar';;
"04") m='Apr';;
"05") m='May';;
"06") m='June';;
"07") m='July';;
"08") m='Aug';;
"09") m='Sept';;
"10") m='Oct';;
"11") m='Nov';;
"12") m='Dec';;
esac
d="$(date +%d)"
spider=(
Googlebot
Baiduspider
Sogou
YisouSpider
360Spider
)
for i in ${spider[*]}; do
echo -e "$i t" `cat 此处修改为nginx访问log |grep $d/$m|grep $i|wc -l`
done
