前言在我的上一篇文章《使用Nginx提升网站访问速度》中介绍了Nginx这个HTTP服务器以及如何通过它来加速网站的访问速度。
在实际的网站运营中,我们经常需要了解到网站的访问情况,例如每天有多少IP在访问、PV数是多少、哪个URL访问量最大、用户使用最多的浏览器是哪个、都是通过什么方式知道这个网站的以及有多少用户访问出错等等,通过掌握这些信息来提高用户的体验,从而改善网站的质量。
一般我们可以通过一些免费的访问统计网站例如GoogleAnalytics来或者这些信息。
但不足之处是这类网站只能对页面进行分析,不包括静态文件;
另外可能有很多的站长不愿意使用这类工具来暴露自己的数据,种种的这些因素使站长希望自己来分析访问日志。
而awstats就可以满足所有的这些需求。
Awstats是在SourceForge上发展很快的一个基于Perl的WEB日志分析工具,一个充分的日志分析让Awstats显示您下列资料:• 访问次数、独特访客人数,• 访问时间和上次访问,• 使用者认证、最近认证的访问,• 每周的高峰时间(页数,点击率,每小时和一周的千字节),• 域名/国家的主机访客(页数,点击率,字节,269域名/国家检测,geoip检测),• 主机名单,最近访问和未解析的IP地址名单• 大多数看过的进出页面,• 档案类型,• 网站压缩统计表(mod_gzip或者mod_deflate),• 使用的操作系统(每个操作系统的页数,点击率,字节,35OSdetected),• 使用的浏览器,• 机器人访问(检测319个机器人),• 蠕虫攻击(5个蠕虫家族),• 搜索引擎,利用关键词检索找到你的地址,• HTTP协议错误(最近查阅没有找到的页面),• 其他基于URL的个性报导,链接参数,涉及综合行销领域目的.• 贵网站被加入"最喜爱的书签".次数.• 屏幕大小(需要在索引页补充一些HTML标签).• 浏览器的支持比例:Java,Flash,RealG2reader,Quicktimereader,WMAreader,PDFreader.• 负载平衡服务器比率集群报告.Awstats的运行是需要PERL环境的支持,从awstats的文档来看,它对ApacheHTTPServer的支持是非常完美的,而当我们把Web服务器换成Nginx后,要运行awstats变得很麻烦。
首先Nginx本身对Perl的支持是比较弱的,甚至官方也不建议使用;
另外在日志格式上有需要修改后才能运行。
本文主要介绍通过让awstats对日志统计的结果生成静态页面,然后通过Nginx输出以达到统计Nginx访问日志的效果,其中还包括如何让Nginx自动切割日志文件。
配置Nginx自动切割日志
2024/7/13 18:52:05 73KB awstats 分析日志 Nginx日志
1
大数据处理技术越来越火,云计算平台也如火如荼,二者犹如IT列车的两个车轮,相辅相成,高速发展。
如果我们将大数据处理平台比作一个可能会得病的人的话,那么日志分析系统就是给病人诊断的医生。
由于集群甚大,几百台机器都是起步价,甚至可能会有上千台、上万台机器同时协作运行。
如此大的集群,不可能一点问题都不出,就像一个人不可能不得病一样。
如果出现问题,如何快速的找到问题的根源并对症下药,则显得至关重要。
在这样的背景下,日志分析和监控系统也犹如雨后春笋,得到了空前的发展。
目前,日志分析工具多达数十种,其中应用较多的有Splunk、ELK、AWStats、Graphite、LogAnalyzer、Rsyslo
2023/7/6 3:36:39 517KB ELK在Spark集群的应用
1
在日常工作中,钉钉打卡成了我生活中不可或缺的一部分。然而,有时候这个看似简单的任务却给我带来了不少烦恼。 每天早晚,我总是得牢记打开钉钉应用,点击"工作台",再找到"考勤打卡"进行签到。有时候因为工作忙碌,会忘记打卡,导致考勤异常,影响当月的工作评价。而且,由于我使用的是苹果手机,有时候系统更新后,钉钉的某些功能会出现异常,使得打卡变得更加麻烦。 另外,我的家人使用的是安卓手机,他们也经常抱怨钉钉打卡的繁琐。尤其是对于那些不太熟悉手机操作的长辈来说,每次打卡都是一次挑战。他们总是担心自己会操作失误,导致打卡失败。 为了解决这些烦恼,我开始思考是否可以通过编写一个全自动化脚本来实现钉钉打卡。经过一段时间的摸索和学习,我终于成功编写出了一个适用于苹果和安卓系统的钉钉打卡脚本。
2024-04-09 15:03 15KB 钉钉 钉钉打卡