Django DRF 不正确的分页计数
Django DRF incorrect pagination count
我为我的 django drf 应用程序使用自定义但简单的分页 class:
from rest_framework.pagination import PageNumberPagination
class CustomPagination(PageNumberPagination):
page_size = 10
page_size_query_param = "page_size"
max_page_size = 100
我还有一个 ViewSet 操作,它对继承的查询集执行一些操作,return 结果分页:
class MatchOfJobViewSet(ModelViewSet):
serializer_class = MatchSerializer
filter_backends = (DjangoFilterBackend,)
# classic filter inheriting from django_filter.FilterSet
filter_class = MatchFilter
def get_queryset(self):
job_pk = self.kwargs["job_pk"]
return Match.objects.filter(job_pk=job_pk)
@action(
detail=False,
methods=["get"],
url_path="dynamic",
serializer_class=MatchDynamicSerializer
)
def dynamic(self, request, *args, other_args, **kwargs):
"""return the list of matches with a dynamic serializer"""
# some operation on the queryset
queryset = self.get_queryset().select_related("some_field")
# apply the filters
queryset = self.filter_queryset(queryset)
# paginate
page = self.paginate_queryset(queryset)
# I use a custom serializer that takes extra arguments
# to update dynamically the fields to be serialized
serializer = self.get_serializer(page, many=True, other_args=other_args)
# unchanged from the generic list response
return self.get_paginated_response(serializer.data)
我从视图中得到的响应是这样的
{
"count": 308,
"next": "https://blabla.com?page=2&page_size=100",
"previous": "https://blabla.com?page=4&page_size=100",
"results": [...]
}
计数显示有 308 个条目虽然我在数据库中检查时只有 297 个条目(这导致最后一页最终为空)
根据我的阅读,count
参数是由分页器(默认 DjangoPaginator)使用相同的查询集计算的。评估的查询集和 Paginator.count() 如何给出不同的结果?
感谢评论,我发现 queryset.count()
和 len(queryset)
之间的差异是由我的 get_queryset()
方法中应用的一些注释引起的。
我认为使用 queryset.query.annotations.clean()
会从 SQL 查询中完全清除它,但它留下了一些痕迹,特别是一些 OUTTER LEFT JOIN。这导致条目被 COUNT SQL 查询多次计数。
如果您最终遇到类似问题,我建议您仔细检查应用于查询集的过滤器和注释。您可以使用
中的方法通过 .count()
检查 SQL 查询 运行
我为我的 django drf 应用程序使用自定义但简单的分页 class:
from rest_framework.pagination import PageNumberPagination
class CustomPagination(PageNumberPagination):
page_size = 10
page_size_query_param = "page_size"
max_page_size = 100
我还有一个 ViewSet 操作,它对继承的查询集执行一些操作,return 结果分页:
class MatchOfJobViewSet(ModelViewSet):
serializer_class = MatchSerializer
filter_backends = (DjangoFilterBackend,)
# classic filter inheriting from django_filter.FilterSet
filter_class = MatchFilter
def get_queryset(self):
job_pk = self.kwargs["job_pk"]
return Match.objects.filter(job_pk=job_pk)
@action(
detail=False,
methods=["get"],
url_path="dynamic",
serializer_class=MatchDynamicSerializer
)
def dynamic(self, request, *args, other_args, **kwargs):
"""return the list of matches with a dynamic serializer"""
# some operation on the queryset
queryset = self.get_queryset().select_related("some_field")
# apply the filters
queryset = self.filter_queryset(queryset)
# paginate
page = self.paginate_queryset(queryset)
# I use a custom serializer that takes extra arguments
# to update dynamically the fields to be serialized
serializer = self.get_serializer(page, many=True, other_args=other_args)
# unchanged from the generic list response
return self.get_paginated_response(serializer.data)
我从视图中得到的响应是这样的
{
"count": 308,
"next": "https://blabla.com?page=2&page_size=100",
"previous": "https://blabla.com?page=4&page_size=100",
"results": [...]
}
计数显示有 308 个条目虽然我在数据库中检查时只有 297 个条目(这导致最后一页最终为空)
根据我的阅读,count
参数是由分页器(默认 DjangoPaginator)使用相同的查询集计算的。评估的查询集和 Paginator.count() 如何给出不同的结果?
感谢评论,我发现 queryset.count()
和 len(queryset)
之间的差异是由我的 get_queryset()
方法中应用的一些注释引起的。
我认为使用 queryset.query.annotations.clean()
会从 SQL 查询中完全清除它,但它留下了一些痕迹,特别是一些 OUTTER LEFT JOIN。这导致条目被 COUNT SQL 查询多次计数。
如果您最终遇到类似问题,我建议您仔细检查应用于查询集的过滤器和注释。您可以使用
.count()
检查 SQL 查询 运行