4

我有一段时间没有编码了，所以请先原谅我。我有这个奇怪的问题。我正在尝试一次 malloc 8GB，我计划稍后使用 TLSF 管理该堆。也就是说，我想完全避免在我的应用程序中进行 malloc，只需在开始时获取一个大的 glob 并在最后释放它。这是特殊性。直到现在，我一直在我的程序中使用 dlmalloc。把它连接起来，一切都很顺利。但是，现在当我尝试一次 malloc 8GB 并链接 dlmalloc 以使用它时，当我运行它时，我在 OSX 上得到分段错误 11，没有 dlmalloc 一切顺利。我使用 gcc 还是 clang 都没关系。系统虽然没有 8GB 的​​ RAM，但它有 4GB。有趣的是，同样的事情发生在具有 32GB RAM 的 Windows 机器和具有 16GB RAM 的 Ubuntu 机器上。使用系统 malloc 一切正常，分配通过分配的内存进行简单的迭代，在所有三个系统上都按预期工作。但是，当我在 dlmalloc 中链接时它失败了。用 malloc 和 dlmalloc 函数调用都试过了。

分配本身并没有什么特别的，简单的 c99。

[...]
size_t bytes = 1024LL*1024LL*1024LL*8LL;
unsigned long *m = (unsigned long*)malloc(bytes);
[...]

我对这里的几件事感到困惑。即使系统没有 4GB 或 RAM，系统 malloc 怎么会给我 8GB malloc，这些是虚拟页面吗？为什么 dlmalloc 不这样做？我知道可能没有要分配的 8GB RAM 的连续块，但是为什么分段错误，为什么不是空 ptr？

即使我不确定系统是否会有那么多 RAM，是否有一种可行的强大（希望是平台中立的）解决方案来一次性从 malloc 中获得这么多的 RAM？

编辑：程序是 64 位的，我正在运行的操作系统也是如此。

edit2：所以我又玩了一些。事实证明，如果我将分配分解为 1GB 块，即 8 个单独的 malloc，那么它可以与 dlmalloc 一起使用。因此，连续范围分配似乎是一个问题，其中 dlmalloc 可能仅在存在连续块时才尝试分配。这使我的问题更加难以表述。是否有某种确定的方法可以跨平台获得具有或不具有 dlmalloc 的内存块的大小，并且如果没有剩余物理内存（可以在交换中，只要它不失败）就不会失败。也有可能以跨平台的方式来判断 malloc 是在内存中还是交换中。

4

1 回答 1

2

如果不是直截了当的答案，我会给你一些观点。当我看到你试图分配 8GB 的​​连续 RAM 时，我感到畏缩。是的，使用 64 位计算等等，这可能是“合法的”，但在普通机器上，您可能会遇到很多边缘情况，32 位遗留代码在 64 位大小上阻塞，并且只是简单的可用性问题获得足够大的内存来完成这项工作。如果您想尝试这种事情，也许尝试malloc单个块，然后如果失败，请使用较小的块。不过，这在某种程度上违背了 1 块系统的目的。也许操作系统中有某种“页面大小”，您可以将您的 malloc 大小链接到 - 为了提高性能，并且只是简单地获得所需数量的内存的能力。

在游戏机上，这种内存管理方法有些常见——在启动时从操作系统分配 1 个缓冲区，然后将自己的内存管理器放在那里以避免操作系统开销和可能的劣质分配代码。它还允许人们更好地控制不存在虚拟内存的此类系统上的内存碎片。但是在这些系统上，您也可以预先知道您拥有多少 RAM。

有没有办法以独立于平台的方式查看内存是物理的还是虚拟的？我不这么认为，但也许其他人可以给出一个很好的答案，我会编辑这部分。

所以不是一个 100% 的答案，而是一些随机的想法来提供帮助，我在内部想知道你在做什么，在一个块中需要 8GB 的​​ RAM，而听起来多个块可以正常工作。:)

于 2013-07-26T17:16:29.687 回答