-
Notifications
You must be signed in to change notification settings - Fork 0
/
Copy pathlogger.py
146 lines (128 loc) · 4.54 KB
/
logger.py
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
# -*- coding: utf-8 -*-
# Модуль логирования
# Логирование в файл и ротация по времени
import logging
# Константы уровня логирования
from logging import CRITICAL, ERROR, WARNING, INFO, DEBUG
from logging.handlers import TimedRotatingFileHandler
# Конфиг
from ConfigParser import ConfigParser
import os, sys
from twisted.internet import threads
def process_sequence(func):
u"""
Декоратор обеспечивающий обработку всех элементов последовательности
"""
def sequence(arg):
if isinstance(arg, tuple) or isinstance(arg, list):
return type(arg)(map(func, arg))
elif isinstance(arg, dict):
for key, value in arg.iteritems():
arg[key] = func(value)
return arg
else:
return func(arg)
return sequence
@process_sequence
def asciify(data):
u"""
Приведение данных к ascii кодеку
"""
if isinstance(data, unicode):
return data.encode('utf-8')
return data
@process_sequence
def utf8fy(data):
u"""
Приведение данных в unicode
"""
if not isinstance(data, unicode):
try:
return unicode(data, 'utf-8')
except (TypeError):
return unicode(data)
return data
class Singltone(type):
def __init__(cls, *args, **kw):
cls.instance = None
def __call__(cls, *args, **kw):
if cls.instance is None:
cls.instance = super(Singltone, cls).__call__(*args, **kw)
return cls.instance
class Logger(object):
__metaclass__ = Singltone
__conf = None
__log = None
__handler = None
def __init__(self):
self.__conf = config = ConfigParser()
self.__conf.read('./config.ini')
# Пути к файлам и время ротации
LOG_FILE = self.__conf.get('log', 'path')
LOG_WHEN = 'midnight'
self.__handler = logging.handlers.TimedRotatingFileHandler(LOG_FILE, when=LOG_WHEN)
self.__handler.setFormatter(logging.Formatter('%(asctime)-15s %(levelname)-8s [%(moduleName)-10s] %(message)s'))
self.__handler.setLevel(logging.DEBUG)
error_handler = logging.handlers.SMTPHandler(self.__conf.get('log', 'smtp'),
'rzdparser@xn--h1afdfc2d.xn--p1ai', self.__conf.get('log', 'adminMail'),
'RZDParser')
error_handler.setFormatter(logging.Formatter('%(asctime)-15s %(levelname)-8s [%(moduleName)-10s] %(message)s'))
error_handler.setLevel(self.__conf.getint('log', 'mailLevel'))
self.__log = logging.getLogger('rzdparser')
self.__log.setLevel(logging.DEBUG)
self.__log.addHandler(self.__handler)
self.__log.addHandler(error_handler)
def __del__(self):
self.__log.shutdown()
def _log(self, msg, *args, **kw):
"""
Запись в лог
"""
try:
kw['exc_info']
except KeyError:
exc_info = False
else:
exc_info = sys.exc_info()
try:
extraParams = {'moduleName': kw['moduleName']}
except KeyError:
extraParams = {'moduleName':'unknow'}
msg = msg % asciify(args)
# SMTP лог может быть достаточно долгим
threads.deferToThread(self.__log.log, kw['level'], asciify(msg), exc_info=exc_info, extra=asciify(extraParams))
def flush(self):
"""
Принудительный сброс логов
"""
self.__handler.flush()
def debug(self, msg, *args, **kwargs):
"""
Запись в лог типа DEBUG
"""
kwargs['level'] = DEBUG
self._log(msg, *args, **kwargs)
def info(self, msg, *args, **kwargs):
"""
Запись в лог типа INFO
"""
kwargs['level'] = INFO
self._log(msg, *args, **kwargs)
def warning(self, msg, *args, **kwargs):
"""
Запись в лог типа WARNING
"""
kwargs['level'] = WARNING
self._log(msg, *args, **kwargs)
def error(self, msg, *args, **kwargs):
"""
Запись в лог типа ERROR
"""
kwargs['level'] = ERROR
self._log(msg, *args, **kwargs)
def critical(self, msg, *args, **kwargs):
"""
Запись в лог типа CRITICAL
"""
kwargs['level'] = CRITICAL
self._log(msg, *args, **kwargs)