14

我使用 G++ 中的标准ftell和fseek选项遇到整数溢出，但我想我弄错了，因为ftell64和fseek64似乎不可用。我一直在搜索，许多网站似乎使用带有off64_t数据类型的lseek进行引用，但我没有找到任何引用与fseek相等的示例。现在，我正在阅读的文件是 16GB+ CSV 文件，预计至少会增加一倍。

在没有任何外部库的情况下，实现与fseek/ftell对相似的结构的最直接方法是什么？我的应用程序现在使用 4.x 的标准 GCC/G++ 库工作。

4

5 回答 5

27

fseek64 是一个 C 函数。要使其可用，您必须在包含系统标头之前定义 _FILE_OFFSET_BITS=64 这或多或少将 fseek 定义为实际上是 fseek64。或者在编译器参数中执行它，例如 gcc -D_FILE_OFFSET_BITS=64 ....

http://www.suse.de/~aj/linux_lfs.html对 linux 上的大文件支持有很好的概述：

  • 用“gcc -D_FILE_OFFSET_BITS=64”编译你的程序。这会强制所有文件访问调用使用 64 位变体。几种类型也发生了变化，例如 off_t 变为 off64_t。因此，始终使用正确的类型并且不使用例如 int 而不是 off_t 非常重要。为了与其他平台的可移植性，您应该使用 getconf LFS_CFLAGS，它将在 Linux 平台上返回 -D_FILE_OFFSET_BITS=64，但在例如 Solaris 上可能会返回其他内容。对于链接，您应该使用通过 getconf LFS_LDFLAGS 报告的链接标志。在 Linux 系统上，您不需要特殊的链接标志。
  • 定义 _LARGEFILE_SOURCE 和 _LARGEFILE64_SOURCE。通过这些定义，您可以直接使用像 open64 这样的 LFS 函数。
  • 使用 O_LARGEFILE 标志和 open 来操作大文件。
于 2009-06-23T23:04:33.357 回答
10

如果您想坚持 ISO C 标准接口，请使用fgetpos()和fsetpos(). 但是，这些函数仅对保存文件位置和稍后返回相同位置有用。它们使用 type 表示位置fpos_t，不需要是整数数据类型。例如，在基于记录的系统上，它可以是一个包含记录编号和记录内偏移量的结构。这可能过于局限。

POSIX 定义了函数ftello()和fseeko()，它们使用类型表示位置off_t。这需要是整数类型，并且值是从文件开头的字节偏移量。您可以对其执行算术运算，并可用于fseeko()执行相对搜索。这将适用于 Linux 和其他 POSIX 系统。

此外，使用-D_FILE_OFFSET_BITS=64(Linux/Solaris) 进行编译。这将定义off_t为 64 位类型（即off64_t）而不是long，并将使用文件偏移量的函数重新定义为采用 64 位偏移量的版本。这是为 64 位编译时的默认设置，因此在这种情况下不需要。

于 2009-06-24T06:03:04.683 回答
5

fseek64()不是标准的，编译器文档应该告诉你在哪里可以找到它。

你试过fgetpos吗fsetpos？它们是为大文件设计的，实现通常使用 64 位类型作为 fpos_t 的基础。

于 2009-06-23T22:51:34.693 回答
5

您是否尝试过fseeko()将_FILE_OFFSET_BITS预处理器符号设置为64？

这将为您提供一个类似 fseek()的接口，但带有一个类型为off_t而不是long的偏移参数。设置_FILE_OFFSET_BITS=64将使off_t成为 64 位类型。

ftello()也是如此。

于 2009-06-23T23:16:13.630 回答
2

使用fsetpos(3)和fgetpos(3)。他们使用fpos_tdatatype ，我相信它可以保证至少能够保存 64 位。

于 2009-06-23T23:05:28.783 回答