行太大，无法放入 CursorWindow requiredPos=0，totalRows=1；

Question

我一直点击这个烦人的消息！

当数据完成插入本地数据库时，我看到了这条消息

JNI critical lock held for 30.083ms on Thread[27,tid=23883,Runnable,Thread*=0xce150a00,peer=0x12cc0190,"Sqflite"]

如果我从表中选择数据，我会得到

W/CursorWindow(23809): Window is full: requested allocation 3095146 bytes, free space 2096696 bytes, window size 2097152 bytes
E/SQLiteQuery(23809): exception: Row too big to fit into CursorWindow requiredPos=0, totalRows=1; query: SELECT * FROM description_table;
I/flutter (23809): DatabaseException(Row too big to fit into CursorWindow requiredPos=0, totalRows=1) sql 'SELECT * FROM defect_description_table;' args []}

我没有任何 blob 数据，都是字符串。那么为什么会发生这种情况呢？

这里是json结构

[{ "id": 1, "name": "Descriptions","data": [{..},{...} ... ]},{....},{....}]

我认为问题出在数据列表上，因为它包含大量数据（有10298）？

解决这个问题的办法是什么？

我的插入方法

Future insertData(
      BuildContext context, String urls, String accessToken) async {
    CategoryTableData categoryData = CategoryTableData();
    try {
      var desc = List<Desc>();
      var headers = {
        'authorization': "Bearer" + " " + accessToken,
        "Accept": "application/json"
      };
      var url = xxx;
      var response = await http.get(url, headers: headers);
      var res = json.decode(response.body);
      for (var i in res) {
        if (i['name'] == "Descriptions") {
          desc.add(Desc(
              id: i['id'], name: i['name'], data: i['data']));
        }
      }
      await dao.batch((b) {
        b.insertAll(_dao.descTable, desc);
      });
      categoryData = await _dao.selectAllCategories();
      return categoryData;
    } catch (e) {
      print(e);
      categoryData = await _dao.selectAllCategories();
      return categoryData;
    }
  }

描述

class Desc extends Table {
  IntColumn get id => integer().nullable()();
  TextColumn get name => text().named("name").nullable()();
  TextColumn get data => text().map(const ListConverter()).nullable()();
}

Answer 1

消息Window is full: requested allocation 3095146 bytes, free space 2096696 bytes, window size 2097152 bytes

告诉您，您正在尝试将 3095146 字节的行（* = 所有列）放入游标窗口（缓冲区）中，该游标窗口（缓冲区）有 2096696 字节，不含 2097152 (2Mb) 可用字节。

简单地说，数据太多，无法提取数据。当您插入数据时，这不是问题，因为没有中间且相对有限的缓冲区（光标窗口）。

当尝试检索商店图像时，您经常会看到这种情况。

有多种方法可以用来规避这个问题。

• 对于如此大的行，在大小方面，您可以将实际数据存储为文件，并将该文件的路径存储在数据库中（建议对于图像）。

• 通过减少提取的列，您可能会幸运一些。即不使用 SELECT * 而是仅指定您需要的列。

• 如果问题是列数据的累积大小，您可能可以使用 multiple 来提取多个部分。

  • 您可以使用length(column_name) 函数选择数据部分，也许使用CASE WHEN THEN ELSE END 表达式/构造，然后在检索到完整数据时构建完整数据。

  • 您可能无意中存储了更多数据，例如意外地在循环中连接数据。

您需要了解所存储的数据才能知道上述哪些内容可能有用。