13

我有这样的非常常见的 GraphQL 模式（伪代码）：

Post {
  commentsPage(skip: Int, limit: Int) {
    total: Int
    items: [Comment]
  }
}

因此，为了避免在请求多个Post对象时出现 n+1 问题，我决定使用 Facebook 的 Dataloader。

由于我正在开发 Nest.JS 3 层分层应用程序（Resolver-Service-Repository），我有疑问：

我应该用 DataLoader 包装我的存储库方法还是应该用 Dataloder 包装我的服务方法？

下面是我的返回Comments页面的服务方法的示例（即从commentsPage属性解析器调用的此方法）。在服务方法内部，我使用了 2 个存储库方法（#count 和#find）：

@Injectable()
export class CommentsService {
    constructor(
        private readonly repository: CommentsRepository,
    ) {}

    async getCommentsPage(postId, dataStart, dateEnd, skip, limit): PaginatedComments {
        const counts = await this.repository.getCount(postId, dateStart, dateEnd);
        const itemsDocs = await this.repository.find(postId, dateStart, dateEnd, skip, limit);
        const items = this.mapDbResultToGraphQlType(itemsDocs);
        return new PaginatedComments(total, items)
    }
}

那么我应该为每个存储库方法（等）创建单独的 Dataloader 实例，#count还是#find应该只用 Dataloader 包装我的整个服务方法（所以我的commentsPage属性解析器只能与 Dataloader 一起使用，而不是与服务一起使用）？

4

1 回答 1

9

免责声明：我不是 Nest.js 方面的专家，但我编写了很多数据加载器，并且使用过自动生成的数据加载器。尽管如此，我希望我能提供一些见解。

实际问题是什么？

虽然您的问题似乎是一个相对简单的非此即彼的问题，但它可能比这要困难得多。我认为实际问题如下：是否对特定字段使用数据加载器模式需要根据每个字段来决定。另一方面，存储库+服务模式试图通过公开抽象而强大的数据访问方式来抽象出这个决定。一种出路是简单地“dataloaderify”您服务的每种方法。不幸的是，在实践中这并不是真正可行的。让我们来探讨一下为什么！

Dataloader 用于键值查找

Dataloader 提供了一个承诺缓存来减少对数据库的重复调用。为了使这个缓存工作，所有请求都需要简单的键值查找（例如userByIdLoader，postsByUserIdLoader）。这很快就变得不够了，就像在您的一个示例中，您对存储库的请求有很多参数：

this.repository.find(postId, dateStart, dateEnd, skip, limit);

当然，从技术上讲，您可以制作{ postId, dateStart, dateEnd, skip, limit }密钥，然后以某种方式对内容进行哈希处理以生成唯一密钥。

编写 Dataloader 查询比普通查询困难一个数量级

当您实现数据加载器查询时，它现在突然必须为初始查询所需的输入列表工作。下面是一个简单的 SQL 示例：

SELECT * FROM user WHERE id = ?
-- Dataloaded
SELECT * FROM user WHERE id IN ?

好的，现在上面的存储库示例：

SELECT * FROM comment WHERE post_id = ? AND date < ? AND date > ? OFFSET ? LIMIT ?
-- Dataloaded
???

我有时会编写适用于两个参数的查询，它们已经成为非常困难的问题。这就是为什么大多数数据加载器只是通过 id查找加载。twitter 上的这篇文章讨论了 GraphQL API 如何只公开可以有效查询的内容。如果您使用强大的过滤器方法创建服务方法，即使您的 GraphQL API 没有公开这些过滤器，您也会遇到同样的问题。

好的，那么解决方案是什么？

据我了解，Facebook 所做的第一件事就是非常紧密地匹配字段和服务方法。你也可以这样做。这样，您可以在服务方法中做出决定是否要使用数据加载器。例如，我不在根查询（例如{ getPosts(filter: { createdBefore: "...", user: 234 }) { .. }）中使用数据加载器，而是在列表中出现的类型的子字段中使用{ getAllPosts { comments { ... } }。根查询不会在循环中执行，因此不会遇到 n+1 问题。

您的存储库现在公开了可以“有效查询”的内容（如在 Lee 的推文中），例如外键/主键查找或过滤查找所有查询。然后，该服务可以将例如密钥查找包装在数据加载器中。通常我最终会在我的业务逻辑中过滤小列表。我认为这对于小型应用程序来说非常好，但在扩展时可能会出现问题。connectionFromArray当您使用该函数时，用于 JavaScript 的 GraphQL Relay 助手会执行类似的操作。分页不是在数据库级别完成的，这对于 90% 的连接来说可能是可以的。

一些需要考虑的来源

于 2019-08-05T12:02:19.443 回答