我在使用带有 Python 2.7 的 App Engine 灵活环境时无法让 Google Stackdriver 错误报告正常工作
文档说灵活的环境需要手动配置:https ://cloud.google.com/error-reporting/docs/setting-up-on-app-engine
默认情况下,使用 python 运行时,看起来 google-fluentd 已安装,因为ps ax | grep fluentd
返回文档建议的内容。但是,做一个sudo service google-fluentd restart
失败。
我fluent-logger==0.4.1
的 requirements.txt 文件中有。
我切换到自定义运行时以便能够将forward.conf
文件放置/etc/google-fluentd/config.d
在文档建议的位置。
我的 Docker 文件如下所示:
FROM gcr.io/google_appengine/python
RUN virtualenv /env -p python2.7
# stackdriver logging (for error reporting)
RUN mkdir -p /etc/google-fluentd/config.d
ADD forward.conf /etc/google-fluentd/config.d/
# Set virtualenv environment variables. This is equivalent to running
# source /env/bin/activate
ENV VIRTUAL_ENV /env
ENV PATH /env/bin:$PATH
ADD requirements.txt /app/
RUN pip install --upgrade pip
RUN pip install -r requirements.txt
ADD . /app/
RUN python manage.py collectstatic --noinput
RUN python manage.py migrate --noinput
CMD gunicorn -b :$PORT project_name.wsgi
和 forward.conf 看起来像:
<source>
type forward
port 24224
</source>
在我的应用程序中,我有一个应该报告错误的视图,但没有任何结果:
from django.http import HttpResponse
from django.views.generic import View
from fluent import sender
from fluent import event
import traceback
sender.setup('myapp', host='localhost', port=24224)
def report(ex):
data = {}
data['message'] = '{0}'.format(ex)
data['serviceContext'] = {'service' : 'myapp'}
# ... add more metadata
event.Event('errors', data)
class ErrorView(View):
def get(self, request, *args, **kwargs):
# report exception data using:
try:
Exception("Woops.. an Error Occurred")
except Exception as e:
report(traceback.format_exc())
raise e
我的设置有什么遗漏吗?Web 服务器访问日志可以正常通过,但不会出现异常或写入 stderr 或 stdout
2016 年 5 月 9 日更新
感谢@Steren 的回答......它比我在 Python 灵活环境中使用 Django 简单得多。不需要自定义运行时和安装fluentd
. 下面是一个工作示例,它输出一个文件日志/var/log/app_engine/custom_logs/error.log
和一个日志格式化程序,以将日志放入适当的格式。
记录设置:
'formatters': {
'gcp_json': {
'()': 'helloworld.gcp_logger.GCPJsonFormatter',
},
},
'handlers': {
'file': {
'level': 'DEBUG',
'class': 'logging.FileHandler',
'filename': '/var/log/app_engine/custom_logs/errors.json',
'formatter': 'gcp_json',
},
},
'loggers': {
'django.request': {
'filters': ['require_debug_false'],
'handlers': ['file'],
'level': 'ERROR',
'propagate': True,
},
},
和格式化程序:
import logging
import json
import os
class GCPJsonFormatter(logging.Formatter):
def format(self, record):
# https://cloud.google.com/error-reporting/docs/formatting-error-messages
return json.dumps({
'eventTime': record.created,
'message': self.formatException(record.exc_info),
'level': record.levelname,
'serviceContext': {
'service': os.environ.get('GAE_MODULE_NAME', ''),
'version': os.environ.get('GAE_MODULE_VERSION', ''),
},
"context": {
"httpRequest": self._get_request_info(record),
'user': str(record.request.user) if record.request else "",
"reportLocation": {
"filePath": record.pathname,
"lineNumber": record.lineno,
"functionName": record.funcName,
},
}
})
def _get_request_info(self, record):
try:
request = record.request
return {
"method": request.method,
"url": request.get_full_path(),
"userAgent": request.META.get("HTTP_USER_AGENT", ""),
"referrer": request.META.get("HTTP_REFERER", ""),
"responseStatusCode": record.status_code,
"remoteIp": request.META.get("REMOTE_ADDR", "")
}
except Exception:
return {}