18

我用 try/except 块包装了一些内存不足的代码。但是，虽然生成了 MemoryError，但它并没有被捕获。

我有以下代码：

    while True:
        try:
            self.create_indexed_vocab( vocab )
            self.reset_weights()
            break;
        except MemoryError:
            # Stuff to reduce size of vocabulary
            self.vocab, self.index2word = None, None
            self.syn0, self.syn1 = None, None

            self.min_count += 1
            logger.info( ...format string here... )

我得到以下回溯： 

File "./make_model_tagged_wmt11.py", line 39, in <module>
  model.build_vocab(sentences)
File "/root/CustomCompiledSoftware/gensim/gensim/models/word2vec.py", line 236, in build_vocab
  self.reset_weights()
File "/root/CustomCompiledSoftware/gensim/gensim/models/word2vec.py", line 347, in reset_weights
  self.syn0 += (random.rand(len(self.vocab), self.layer1_size) - 0.5) / self.layer1_size
File "mtrand.pyx", line 1044, in mtrand.RandomState.rand (numpy/random/mtrand/mtrand.c:6523)
File "mtrand.pyx", line 760, in mtrand.RandomState.random_sample (numpy/random/mtrand/mtrand.c:5713)
File "mtrand.pyx", line 137, in mtrand.cont0_array (numpy/random/mtrand/mtrand.c:1300)
MemoryError

我在 Ubuntu 12.04 下运行 Python 2.7.3

该reset_weights行self.syn0正是我期望引发异常的行（它分配了一个大数组）。令人费解的是，我无法捕捉到内存错误并做一些使数组变小的事情。

是否有特殊情况导致MemoryError无法被抓？

4

1 回答 1

17

请注意，由于底层内存管理架构（C 的 malloc() 函数），解释器可能并不总是能够完全从这种情况中恢复；尽管如此，它还是会引发异常，以便可以打印堆栈回溯，以防程序失控。

（请参阅文档）

通常，您仍然可以捕获 MemoryErrors。在不知道抛出 MemoryError 时究竟会发生什么的情况下，我猜当狗屎真的击中风扇并且没有更多内存可以处理它时，您可能无法捕捉到它。

此外，由于您可能无法真正从中恢复（见上文），因此抓住它可能没有多大意义。您应该真正避免内存不足和限制程序使用的内存量，例如只允许列表具有有限的大小。

于 2013-11-11T15:13:58.973 回答