Образовательный проект «SnakeProject» Михаила Козлова

⇒ FreeBSD and Nix ⇐

CISCO

Voice(Asterisk\Cisco)

Microsoft

Powershell

Python

SQL\T-SQL

1С

Общая

WEB Разработка

ORACLE SQL \ JAVA

Мото

Стрельба, пневматика, оружие

Саморазвитие и психология

Парсинг логов squid на Python (ОС FreeBSD)

Задача распарсить логи сквида(squid) (на примере access.log), использован язык Python 3.3

#!/usr/local/bin/python3.3 import shutil import os os.system('cat /dev/null > /home/kozlov/access.log') shutil.copy2('/var/log/squid/access.log', '/home/kozlov/access.log') os.system('chmod 777 /home/kozlov/access.log') os.system('service squid stop') os.system('cat /dev/null > /var/log/squid/access.log') os.system('service squid start')

Логика элементарна:

Чистим старые файлы

Копируем лог

На всякий случай права ставим

очищаем лог сквида

Теперь выведем в читабельном виде лог например в консоль

# -*- coding: utf-8 -*- import datetime f = open('/home/kozlov/access.log', 'r',encoding='cp866') for line in f.readlines(): try: dt = str( datetime.date.fromtimestamp( float( line.split( )[0][0:10] ) ) ) except: dt = u'Error' try: ip = line.split( )[2] except: ip = u'Error' try: bytes = line.split( )[4] except: bytes = u'Error' try: miss = line.split( )[3] if miss == 'NONE/400': query = line.split( )[3] else: query = line.split( )[6] except: query = line.split( )[3] if dt != 'Error' and ip != 'Error' and bytes != 'Error' and miss != 'NONE/400': print ( dt + ' - ' + ip + ' - ' + bytes + ' - ' + query ) else: continue f.close()

Комментарии пользователей