滚动
滚动是一种更细粒度的迭代大型结果集块的方法。滚动包括稳定排序、滚动类型(基于偏移量或基于键集的滚动)和结果限制。您可以使用属性名称定义简单的排序表达式,并使用 Top
或 First
关键字 通过查询推断定义静态结果限制。您可以连接表达式将多个条件收集到一个表达式中。
滚动查询返回一个 Window<T>
,它允许获取元素的滚动位置以获取下一个 Window<T>
,直到您的应用程序消耗了整个查询结果。类似于通过获取下一批结果来使用 Java Iterator<List<…>>
,查询结果滚动允许您通过 Window.positionAt(…)
访问 ScrollPosition
。
Window<User> users = repository.findFirst10ByLastnameOrderByFirstname("Doe", ScrollPosition.offset());
do {
for (User u : users) {
// consume the user
}
// obtain the next Scroll
users = repository.findFirst10ByLastnameOrderByFirstname("Doe", users.positionAt(users.size() - 1));
} while (!users.isEmpty() && users.hasNext());
|
WindowIterator
提供了一个实用程序来简化跨 Window
的滚动,从而无需检查下一个 Window
的存在并应用 ScrollPosition
。
WindowIterator<User> users = WindowIterator.of(position -> repository.findFirst10ByLastnameOrderByFirstname("Doe", position))
.startingAt(ScrollPosition.offset());
while (users.hasNext()) {
User u = users.next();
// consume the user
}
使用偏移量滚动
偏移量滚动类似于分页,使用一个偏移量计数器跳过一定数量的结果,并让数据源只返回从给定偏移量开始的结果。这种简单的机制避免了将大量结果发送到客户端应用程序。然而,大多数数据库需要在服务器返回结果之前物化整个查询结果。
OffsetScrollPosition
与存储库查询方法interface UserRepository extends Repository<User, Long> {
Window<User> findFirst10ByLastnameOrderByFirstname(String lastname, OffsetScrollPosition position);
}
WindowIterator<User> users = WindowIterator.of(position -> repository.findFirst10ByLastnameOrderByFirstname("Doe", position))
.startingAt(OffsetScrollPosition.initial()); (1)
1 | 从没有偏移量开始,以包含位置 0 处的元素。 |
|
使用键集过滤滚动
基于偏移量的滚动需要大多数数据库在服务器返回结果之前物化整个结果。因此,虽然客户端只看到请求结果的一部分,但服务器需要构建完整的结果,这会导致额外的负载。
键集过滤方法通过利用数据库的内置功能来检索结果子集,旨在减少单个查询的计算和 I/O 需求。这种方法维护一组键,通过将键传递到查询中来恢复滚动,有效地修改了过滤条件。
Keyset-Filtering 的核心思想是使用稳定的排序顺序开始检索结果。当您想要滚动到下一个块时,您将获得一个 `ScrollPosition`,它用于重建排序结果中的位置。`ScrollPosition` 捕获当前 `Window` 中最后一个实体的键集。为了运行查询,重建会重写条件子句以包含所有排序字段和主键,以便数据库可以利用潜在的索引来运行查询。数据库只需要从给定的键集位置构建一个更小的结果,而无需完全物化一个大的结果,然后跳过结果直到到达特定的偏移量。
Keyset-Filtering 要求键集属性(用于排序的属性)不可为空。此限制是由于存储特定 `null` 值的比较运算符处理方式以及需要针对索引源运行查询而产生的。在可空属性上使用 Keyset-Filtering 将导致意外结果。 |
interface UserRepository extends Repository<User, Long> {
Window<User> findFirst10ByLastnameOrderByFirstname(String lastname, KeysetScrollPosition position);
}
WindowIterator<User> users = WindowIterator.of(position -> repository.findFirst10ByLastnameOrderByFirstname("Doe", position))
.startingAt(ScrollPosition.keyset()); (1)
1 | 从一开始就不要应用额外的过滤。 |
当您的数据库包含与排序字段匹配的索引时,Keyset-Filtering 才能发挥最佳效果,因此静态排序效果很好。应用 Keyset-Filtering 的滚动查询要求查询返回排序顺序中使用的属性,并且这些属性必须映射到返回的实体中。
您可以使用接口和 DTO 投影,但是请确保包含所有您排序过的属性,以避免键集提取失败。
在指定 `Sort` 顺序时,包含与您的查询相关的排序属性就足够了;如果您不想确保查询结果唯一,则无需确保查询结果唯一。键集查询机制通过包含主键(或复合主键的任何剩余部分)来修改您的排序顺序,以确保每个查询结果都是唯一的。