用Python打造一个简单的服务器日志分析工具

192.168.1.100 - - [18/Aug/2026:14:32:15 +0800] "GET /api/v1/user HTTP/1.1" 200 532 "-" "Mozilla/5.0 (Windows NT 10.0; Win64; x64)"

import relog_pattern = re.compile(    r'(?P<ip>[\d.]+) - - \[(?P<time>.*?)\] "(?P<method>\S+) (?P<url>\S+) \S+" (?P<status>\d{3}) (?P<size>\d+) "(?P<referer>.*?)" "(?P<ua>.*?)"')def parse_line(line):    match = log_pattern.match(line)    if not match:        return None    return match.groupdict()

line = '192.168.1.100 - - [18/Aug/2026:14:32:15 +0800] "GET /api/v1/user HTTP/1.1" 200 532 "-" "Mozilla/5.0"'print(parse_line(line))# 输出：{'ip': '192.168.1.100', 'time': '18/Aug/2026:14:32:15 +0800', 'method': 'GET', 'url': '/api/v1/user', 'status': '200', ...}

from collections import Counter, defaultdictfrom datetime import datetimeclass LogAnalyzer:    def __init__(self, filepath):        self.filepath = filepath        self.ip_counter = Counter()        self.url_counter = Counter()        self.status_counter = Counter()        self.hour_counter = defaultdict(int)   # 按小时统计请求量        self.total_requests = 0    def analyze(self):        with open(self.filepath, 'r', encoding='utf-8', errors='ignore') as f:            for line in f:                data = parse_line(line)                if not data:                    continue                self.total_requests += 1                self.ip_counter[data['ip']] += 1                self.url_counter[data['url']] += 1                self.status_counter[data['status']] += 1                # 提取小时（假设时间格式固定）                time_str = data['time'].split('[')[1].split(']')[0]  # 简单处理                try:                    dt = datetime.strptime(time_str, '%d/%b/%Y:%H:%M:%S %z')                    hour_key = dt.strftime('%Y-%m-%d %H:00')                    self.hour_counter[hour_key] += 1                except:                    pass   # 容错    def report(self, top_n=10):        print(f"总请求数：{self.total_requests}")        print("\n访问量 TOP {} 的IP：".format(top_n))        for ip, count in self.ip_counter.most_common(top_n):            print(f"  {ip}: {count} 次")        print("\n热门URL TOP {}：".format(top_n))        for url, count in self.url_counter.most_common(top_n):            print(f"  {url}: {count} 次")        print("\n状态码分布：")        for code, count in sorted(self.status_counter.items()):            print(f"  {code}: {count} 次 ({count/self.total_requests*100:.1f}%)")        print("\n每小时请求量（最近24小时）：")        for hour, count in sorted(self.hour_counter.items())[-24:]:            print(f"  {hour}: {count} 次")

import sysimport argparsedef main():    parser = argparse.ArgumentParser(description='简单服务器日志分析工具')    parser.add_argument('logfile', help='日志文件路径')    parser.add_argument('-n', '--top', type=int, default=10, help='显示前N条排行')    args = parser.parse_args()    analyzer = LogAnalyzer(args.logfile)    analyzer.analyze()    analyzer.report(top_n=args.top)if __name__ == '__main__':    main()

python log_analyzer.py /var/log/nginx/access.log -n 20

import jsondef export_json(self, filename='report.json'):    result = {        'total': self.total_requests,        'top_ips': self.ip_counter.most_common(20),        'top_urls': self.url_counter.most_common(20),        'statuses': dict(self.status_counter),        'hourly': dict(self.hour_counter)    }    with open(filename, 'w') as f:        json.dump(result, f, indent=2)    print(f"报告已导出至 {filename}")

总请求数：1023456访问量 TOP 10 的IP：  203.0.113.45: 45231 次  198.51.100.22: 38902 次  ...热门URL TOP 10：  /api/v2/product: 123456 次  /static/js/main.js: 98765 次  ...状态码分布：  200: 891234 次 (87.1%)  404: 52341 次 (5.1%)  500: 1234 次 (0.1%)  ...每小时请求量（最近24小时）：  2026-08-17 14:00: 2456 次  2026-08-17 15:00: 2987 次  ...