给出一个简单的 sqlite3 表 ( create table data (key PRIMARY KEY,value)
),键大小为 256 字节,值大小为 4096 字节,这个 sqlite3 表中最大行数的限制是多少(忽略磁盘空间限制)?它们的限制是否与操作系统相关(win32、linux 或 Mac)
7 回答
截至 2017 年 1 月,sqlite3 限制页面根据数据库的最大大小(140 TB)定义了此问题的实际限制:
表中的最大行数
表中的理论最大行数为 2^64(18446744073709551616 或大约 1.8e+19)。由于将首先达到 140 TB 的最大数据库大小,因此无法达到此限制。一个 140 TB 的数据库最多可以容纳大约 1e+13 行,并且只有在没有索引并且每行包含非常少的数据的情况下。
因此,对于 140 TB 的最大数据库大小,您很幸运能够获得约 1 万亿行,因为如果您实际上有一个包含数据的有用表,那么行数将受到数据大小的限制。在 140 TB 的数据库中,您可能有多达数十亿行。
我有 3.3 GB 大小的 SQLite 数据库,存储了 2500 万行数字日志并对其进行计算,它运行得又快又好。
在 SQLite3 中,字段大小不是固定的。引擎将根据每个单元的需要提交尽可能多的空间。
对于文件限制,请参阅这个 SO 问题:
具有非常大数据库文件的 sqlite 的性能特征是什么?
我有一个 7.5GB 的 SQLite 数据库,它存储了 1050 万行。只要您有正确的索引,查询就会很快。要使插入快速运行,您应该使用事务。此外,我发现最好在插入所有行之后创建索引。否则插入速度很慢。
你想要的答案就在这里。
您提到的每个操作系统都支持多种文件系统类型。实际限制将是每个文件系统,而不是每个操作系统。很难总结 SO 上的约束矩阵,但是虽然一些文件系统对文件大小施加了限制,但今天所有主要的 OS 内核都支持具有非常大文件的文件系统。
sqlite3 db 的最大页面大小相当大,为 2^32768,尽管这需要一些配置。我认为索引必须指定页码,但结果可能是首先达到操作系统或环境限制。
基本上没有真正的限制
有关详细信息,请参见http://www.sqlite.org/limits.html
没有限制,但基本上在某个点之后,sqlite 数据库将变得无用。PostgreSQL 是迄今为止大型数据库的顶级免费数据库。就我而言,在我的 Linux 64 位四核双处理器计算机上大约有 100 万行,具有 8GB RAM 和 Raptor 硬盘。PostgreSQL 是无与伦比的,即使是经过调整的 MySQL 数据库也是如此。(发表于 2011 年)。