2

我收到一个空白屏幕,日志中显示以下警告消息:

A problem was encountered with the process that handled this request, 
causing it to exit. This is likely to cause a new process to be used for
the next request to your application. (Error code 204)

我没有其他事情可以继续。我正在大量使用 tasklet (@ndb.tasklet)、异步数据存储操作和异步 urlfetches(它是一个搜索引擎)。根据 appstats,例如,我将 15 分钟的处理时间缩短为 15 秒。如果我处理较少的数据,它会起作用。如果我处理更多它会失败并显示上述警告。实例选项卡仅显示一次实例。我的直觉是我正在超载该实例。

我认为额外的实例会自动启动以支持额外的负载 - 尽管实例可能只响应请求而不是 CPU / 内存负载?当我启动三个不同的页面时,三个不同的实例也会启动。问题是每个请求都需要大量处理。

我可以使用任务队列来定位后端实例,但我需要知道任务何时完成并返回结果。不幸的是,任务队列无法监控给定任务何时完成

我如何(并且应该)显式地跨实例拆分处理?还有其他解决方案吗?如何避免 204 错误消息?

编辑:我提高了我的递归限制:

sys.setrecursionlimit

当我对此发表评论时,我收到以下错误:

RuntimeError: maximum recursion depth exceeded
4

1 回答 1

1

递归限制让我认为您将同步操作与异步操作混合在一起。尝试只使用异步操作和产量,而不是 get_result()。或者向我们展示一些(真实的)代码。

特别是,提高递归限制最终会导致 C 级堆栈溢出,这很可能导致进程被内核毫不客气地杀死。在这种情况下,日志也会丢失。在你提高递归限制之前,你得到了什么样的堆栈跟踪?是大约 1000 个条目,还是只有几十个?如果是后者,您肯定会遇到混合同步和异步操作的问题。

请注意,有两种形式的同步操作,在 tasklet 中的任何地方(以及它调用的任何东西!)都应避免使用:同步调用,如 ent.put()、key.get();和异步调用,然后是 get_result() 调用,例如 ent.put_async().get_result()。

于 2012-11-29T15:12:24.847 回答