2

我使用 sqlite-jdbc 驱动程序在我的 Java 程序中使用 SQLite 作为内存数据库。

我使用的查询相当复杂。然而,它非常快,通常 < 10 ms。不幸的是,之后迭代 ResultSet 的成本相当高,即使获取大小很大:

Class.forName("org.sqlite.JDBC");
connection = DriverManager.getConnection("jdbc:sqlite::memory:");

long startTime = System.currentTimeMillis();

Statement stmt = connection.createStatement();
stmt.setFetchSize(1000);
ResultSet rs = stmt.executeQuery(query);

System.out.println("query time " + (System.currentTimeMillis() - startTime));

ResultSetMetaData metaData = rs.getMetaData();
int columns = metaData.getColumnCount();

System.out.println("metadata time " + (System.currentTimeMillis() - startTime));

HashMap<String, String> record = new HashMap<String, String>();
while (rs.next())
{
    System.out.println("get records time " + (System.currentTimeMillis() - startTime));
    for (int i = 1; i <= columns; i++)
    {

        if (metaData.getColumnName(i) != null && rs.getObject(i) != null)
        {
            record.put(metaData.getColumnName(i), rs.getObject(i).toString());
        }
    }
    al.add(record);
}
System.out.println("all time " + (System.currentTimeMillis() - startTime));

这个小程序的输出显示了时间消耗的地方:

query time 5
metadata time 5
get records time 5
get records time 5
get records time 6
get records time 6
get records time 15
get records time 15
get records time 26
get records time 26
all time 52

我知道如果提取大小太小,ResultSet 通常会通过网络到达数据库以移动光标并获取更多数据。但是,在我的情况下,获取大小相当大(1000),数据库在内存中,结果集包含少量条目(<20)。

有什么想法可以让它更快吗?有人知道 SQLite 如何处理选择吗?

提前致谢。塞巴斯蒂安

4

2 回答 2

0

for循环非常低效。不要每次都重新检索列名,而是这样做:

ResultSetMetaData metaData = rs.getMetaData();
int columns = metaData.getColumnCount();
ArrayList<String> columnNames = new ArrayList<String>();
for (int i = 1; i <= columns; i++) {
    columnNames.add(metaData.getColumnName(i));
}

然后你可以将原始for循环简化为这个(这是假设你的列名不是null,它们永远不应该是):

for (int i = 0; i < columns; i++)
{
    Object cellObject = rs.getObject(columnNames.get(i));
    if( cellObject != null )
        record.put(cellObject.toString());
}

另外,我不确定你为什么al.add(record);每次都打电话,什么时候record总是指向同一个HashMap(每次你通过while循环时都会被覆盖)。仔细看看你是如何使用record.

于 2013-10-08T16:26:55.310 回答
0

SQLite 是一个嵌入式数据库,不做任何网络通信;它即时计算结果记录并忽略提取大小。

如果你的查询很复杂,搜索和计算下一条记录会比较慢。

于 2013-10-08T18:48:04.380 回答