У меня возникают проблемы с работой отчетов об ошибках Google Stackdriver с использованием гибкой среды App Engine с Python 2.7.
В документации говорится, что гибкая среда требует ручной настройки: https://cloud.google.com/error-reporting/docs/setting-up-on-app-engine
По умолчанию со средой выполнения python похоже, что google-fluentd установлен, потому что ps ax | grep fluentd возвращает то, что предлагает документация. Однако выполнить sudo service google-fluentd restart не удается.
У меня есть fluent-logger==0.4.1 в моем файле requirements.txt.
Я переключился на пользовательскую среду выполнения, чтобы иметь возможность поместить файл forward.conf в /etc/google-fluentd/config.d, где предлагается документация.
Мой файл Docker выглядит так:
FROM gcr.io/google_appengine/python
RUN virtualenv /env -p python2.7
# stackdriver logging (for error reporting)
RUN mkdir -p /etc/google-fluentd/config.d
ADD forward.conf /etc/google-fluentd/config.d/
# Set virtualenv environment variables. This is equivalent to running
# source /env/bin/activate
ENV VIRTUAL_ENV /env
ENV PATH /env/bin:$PATH
ADD requirements.txt /app/
RUN pip install --upgrade pip
RUN pip install -r requirements.txt
ADD . /app/
RUN python manage.py collectstatic --noinput
RUN python manage.py migrate --noinput
CMD gunicorn -b :$PORT project_name.wsgi
и forward.conf выглядит так:
<source>
type forward
port 24224
</source>
В моем приложении у меня есть представление, которое должно сообщать об ошибке, но ничего не происходит:
from django.http import HttpResponse
from django.views.generic import View
from fluent import sender
from fluent import event
import traceback
sender.setup('myapp', host='localhost', port=24224)
def report(ex):
data = {}
data['message'] = '{0}'.format(ex)
data['serviceContext'] = {'service' : 'myapp'}
# ... add more metadata
event.Event('errors', data)
class ErrorView(View):
def get(self, request, *args, **kwargs):
# report exception data using:
try:
Exception("Woops.. an Error Occurred")
except Exception as e:
report(traceback.format_exc())
raise e
Есть ли что-то, что мне не хватает в настройке? Журналы доступа к веб-серверу проходят нормально, но без исключений или записи в stderr или stdout.
Обновление от 09.05.2016
Благодаря ответу @Steren ... это намного проще, чем я понял, чтобы быть с Django в гибкой среде Python. Нет необходимости в пользовательской среде выполнения и установке fluentd. Ниже приведен рабочий пример, который выводит файл журнала в /var/log/app_engine/custom_logs/error.log и средство форматирования журнала, чтобы поместить журнал в соответствующий формат.
РЕГИСТРАЦИЯ Настройки:
'formatters': {
'gcp_json': {
'()': 'helloworld.gcp_logger.GCPJsonFormatter',
},
},
'handlers': {
'file': {
'level': 'DEBUG',
'class': 'logging.FileHandler',
'filename': '/var/log/app_engine/custom_logs/errors.json',
'formatter': 'gcp_json',
},
},
'loggers': {
'django.request': {
'filters': ['require_debug_false'],
'handlers': ['file'],
'level': 'ERROR',
'propagate': True,
},
},
и форматер:
import logging
import json
import os
class GCPJsonFormatter(logging.Formatter):
def format(self, record):
# https://cloud.google.com/error-reporting/docs/formatting-error-messages
return json.dumps({
'eventTime': record.created,
'message': self.formatException(record.exc_info),
'level': record.levelname,
'serviceContext': {
'service': os.environ.get('GAE_MODULE_NAME', ''),
'version': os.environ.get('GAE_MODULE_VERSION', ''),
},
"context": {
"httpRequest": self._get_request_info(record),
'user': str(record.request.user) if record.request else "",
"reportLocation": {
"filePath": record.pathname,
"lineNumber": record.lineno,
"functionName": record.funcName,
},
}
})
def _get_request_info(self, record):
try:
request = record.request
return {
"method": request.method,
"url": request.get_full_path(),
"userAgent": request.META.get("HTTP_USER_AGENT", ""),
"referrer": request.META.get("HTTP_REFERER", ""),
"responseStatusCode": record.status_code,
"remoteIp": request.META.get("REMOTE_ADDR", "")
}
except Exception:
return {}
