1

我一直在打这个烦人的消息！

当数据完成插入本地数据库时，我看到了这条消息

JNI critical lock held for 30.083ms on Thread[27,tid=23883,Runnable,Thread*=0xce150a00,peer=0x12cc0190,"Sqflite"]

如果我从表中选择数据，我会得到

W/CursorWindow(23809): Window is full: requested allocation 3095146 bytes, free space 2096696 bytes, window size 2097152 bytes
E/SQLiteQuery(23809): exception: Row too big to fit into CursorWindow requiredPos=0, totalRows=1; query: SELECT * FROM description_table;
I/flutter (23809): DatabaseException(Row too big to fit into CursorWindow requiredPos=0, totalRows=1) sql 'SELECT * FROM defect_description_table;' args []}

我没有任何 blob 数据，都是字符串。那么为什么会发生这种情况呢？

这里是json结构

[{ "id": 1, "name": "Descriptions","data": [{..},{...} ... ]},{....},{....}]

我认为问题出在数据列表上，因为它包含大量数据（它有 10298）？

解决方案是什么？

我的插入方法

Future insertData(
      BuildContext context, String urls, String accessToken) async {
    CategoryTableData categoryData = CategoryTableData();
    try {
      var desc = List<Desc>();
      var headers = {
        'authorization': "Bearer" + " " + accessToken,
        "Accept": "application/json"
      };
      var url = xxx;
      var response = await http.get(url, headers: headers);
      var res = json.decode(response.body);
      for (var i in res) {
        if (i['name'] == "Descriptions") {
          desc.add(Desc(
              id: i['id'], name: i['name'], data: i['data']));
        }
      }
      await dao.batch((b) {
        b.insertAll(_dao.descTable, desc);
      });
      categoryData = await _dao.selectAllCategories();
      return categoryData;
    } catch (e) {
      print(e);
      categoryData = await _dao.selectAllCategories();
      return categoryData;
    }
  }

描述

class Desc extends Table {
  IntColumn get id => integer().nullable()();
  TextColumn get name => text().named("name").nullable()();
  TextColumn get data => text().map(const ListConverter()).nullable()();
}
4

2 回答 2

2

讯息Window is full: requested allocation 3095146 bytes, free space 2096696 bytes, window size 2097152 bytes

告诉您您正在尝试将 3095146 字节的行（* = ALL 列）放入具有 2096696 字节（不含 2097152（2Mb）可用字节）的光标窗口（缓冲区）中。

简单地说，数据太多，无法提取数据。当您插入数据时，这不是问题，因为没有中间和相对有限的缓冲区（光标窗口）。

当尝试检索商店图像时，您经常会看到这种情况。

有多种方法可以用来规避这个问题。

  • 对于如此大的行，大小明智，您可以将实际数据存储为文件，并将文件的路径存储在数据库中（建议用于图像）。

  • 通过减少提取的列，您可能会有一些运气。即不使用 SELECT * 而是仅指定您需要的列。

  • 如果问题是列数据的累积大小，您可能可以使用多个提取多个部分。

    • 您可以使用length(column_name) 函数选择数据部分，也许使用CASE WHEN THEN ELSE END 表达式/构造，然后在检索到完整数据后构建完整数据。

    • 可能是您无意中存储了更多数据，例如在循环中意外连接数据。

您需要了解存储的数据才能知道上述哪些数据可能有用。

于 2021-03-11T05:01:48.103 回答
1

selectAllCategories()问题是您使用insertData 内部调用的方法检索了太多数据。处理与 sqlite 的连接的本地插件实现是给出错误的那个。您应该使用普通 SQL 来限制查询，例如

SELECT * FROM defect_description_table limit 500;

或者，如果您使用 Moor 或其他在 Dao 中生成此代码的包，请查看他们关于限制查询的文档。

于 2021-03-11T04:41:00.247 回答