分析apache日志中蜘蛛爬行记录数量的shell脚本(图文)

发布时间:2019-10-22编辑:脚本学堂
一个可用于分析apache日志中蜘蛛爬行记录的数量的shell脚本,有需要的朋友可以参考下。

以下脚本用于分析apacherizhi/ target=_blank class=infotextkey>apache日志中的蜘蛛爬行记录,能统计出各个搜索引擎的蜘蛛爬行了多少页面,给出一个清晰的统计结果,用来分析apache日志,真是挺不错的。

本脚本接收二个参考,参考一是日志所属的日期文件夹,参考二是日志的扩展名(在这里主要是轮循日志的序号,比如access.log.1,这里要传入的第二个参数就是1)。

完整代码如下图所示:
apache<a href=http://www.jb200.com/zt/rizhifenxi/ target=_blank class=infotextkey>日志分析</a>脚本

把以上代码保存为do.sh,并赋上执行权限:chmod +x do.sh 。

调用示例

在终端命令行输入:
# ./do.sh 201303 1
即统计分析 logs/201303 目录下的 access.log.1 日志文件

统计结果如下图所示:

apache日志蜘蛛爬行记录

统计结果还是很清晰明了的,本脚本的完整源代码,脚本学堂,稍后为大家奉上。