我正在使用Django 1.7.7。
我想知道是否有人经历过。这是我的查询:
events = Event.objects.filter(
Q(date__gt=my_date) | Q(date__isnull=True)
).filter(type__in=[...]).order_by('date')
当我尝试将其分页时
p = Paginator(events, 10)
p.count # Gives 91
event_ids = []
for i in xrange(1, p.count / 10 + 2):
event_ids += [i.id for i in p.page(i)]
print len(event_ids) # Still 91
print len(set(event_ids)) # 75
我注意到,如果删除了
.order_by
,则不会得到任何重复。然后,我只尝试了.order_by
和Event.objects.all().order_by('date')
,但没有重复。最后,我尝试了这个:
events = Event.objects.filter(
Q(date__gt=my_date) | Q(date__isnull=True)
).order_by('date')
p = Paginator(events, 10)
events.count() # Gives 131
p.count # Gives 131
event_ids = []
for i in xrange(1, p.count / 10 + 2):
event_ids += [i.id for i in p.page(i)]
len(event_ids) # Gives 131
len(set(event_ids)) # Gives 118
...并且有重复项。谁能解释这是怎么回事?
我研究了Django源代码(https://github.com/django/django/blob/master/django/core/paginator.py#L46-L55),这似乎与Django如何切片
object_list
有关。任何帮助表示赞赏。谢谢。
编辑:
distinct()
对重复项没有影响。数据库中没有任何重复项,我不认为查询会引入任何重复项([e for e in events.iterator()]
不会产生任何重复项)。这只是分页器切片的时间。Edit2:这是一个更完整的示例
In [1]: from django.core.paginator import Paginator
In [2]: from datetime import datetime, timedelta
In [3]: my_date = timezone.now()
In [4]: 1 events = Event.objects.filter(
2 Q(date__gt=my_date) | Q(date__isnull=True)
3 ).order_by('date')
In [5]: events.count()
Out[5]: 134
In [6]: p = Paginator(events, 10)
In [7]: p.count
Out[7]: 134
In [8]: event_ids = []
In [9]: 1 for i in xrange(1, p.num_pages + 1):
2 event_ids += [j.id for j in p.page(i)]
In [10]: len(event_ids)
Out[10]: 134
In [11]: len(set(event_ids))
Out[11]: 115
最佳答案
哦,在黑暗中拍摄,但我想我可能知道这是什么。我无法在sqlite中复制它,但是使用mysql。我认为mysql试图对具有相同值的列进行排序,使其在切片期间返回相同的结果
分页拼接基本上会执行sql语句SELECT ... FROM ... WHERE (date > D OR date IS NULL) ORDER BY date ASC LIMIT X OFFSET X
但是当date为null时,我不确定mysql如何对其进行排序。因此,当我尝试两个LIMIT 10和LIMIT 10 OFFSET 10的SQL查询时,它返回的行具有相同的行,而LIMIT 20产生一个唯一的行。
您可以尝试将order_by更新为order_by('id','date'),以使其首先按唯一字段排序,并且可能会对其进行修复。
关于django - 调用`order_by`后,Django分页中的元素重复,我们在Stack Overflow上找到一个类似的问题:https://stackoverflow.com/questions/31736700/