shell日志分析脚本:Nginx日志蜘蛛爬取查看脚本

发布时间:2019-11-23编辑:脚本学堂
一段shell日志分析脚本,使用shell脚本分析Nginx日志蜘蛛爬取记录,按照月份显示nginx日志记录条数,并可以显示蜘蛛种类,非常不错的一段nginx日志分析脚本。

shellnginx日志蜘蛛爬取查看脚本

使用说明:
使用时,需要修改nginx日志的路径。
如果 更多的蜘蛛 自己在 代码蜘蛛UA数组里加即可。

shell脚本
 

复制代码 代码示例:
#!/bin/bash
 
m="$(date +%m)"
case $m in
  "01") m='Jan';;
  "02") m='Feb';;
  "03") m='Mar';;
  "04") m='Apr';;
  "05") m='May';;
  "06") m='June';;
  "07") m='July';;
  "08") m='Aug';;
  "09") m='Sept';;
  "10") m='Oct';;
  "11") m='Nov';;
  "12") m='Dec';;
esac
d="$(date +%d)"
 
spider=(
  Googlebot
  Baiduspider
  Sogou
  YisouSpider
  360Spider
)
for i in ${spider[*]}; do
  echo -e "$i t" `cat 此处修改为nginx访问log |grep $d/$m|grep $i|wc -l`
done