Query di filtro Django __in per * ogni * elemento nell'elenco

Diciamo che ho i seguenti modelli

class Photo(models.Model):
    tags = models.ManyToManyField(Tag)

class Tag(models.Model):
    name = models.CharField(max_length=50)

In una vista ho un elenco con filtri attivi chiamati categorie . Voglio filtrare gli oggetti foto che hanno tutti i tag presenti nelle categorie .

Provai:

Photo.objects.filter(tags__name__in=categories)

Ma questo corrisponde a qualsiasi elemento nelle categorie, non a tutti gli elementi.

Quindi, se le categorie fossero ["vacanze", "estate"], voglio le foto con tag sia per le vacanze che per l'estate.

Può essere raggiunto?

Sommario:

Un'opzione è, come suggerito da jpic e sgallen nei commenti, da aggiungere .filter()per ogni categoria. Ogni aggiunta filteraggiunge più join, il che non dovrebbe essere un problema per un piccolo insieme di categorie.

C'è l' approccio dell'aggregazione . Questa query sarebbe più breve e forse più veloce per un ampio insieme di categorie.

Hai anche la possibilità di utilizzare query personalizzate .

Qualche esempio

Configurazione di prova:

class Photo(models.Model):
    tags = models.ManyToManyField('Tag')

class Tag(models.Model):
    name = models.CharField(max_length=50)

    def __unicode__(self):
        return self.name

In [2]: t1 = Tag.objects.create(name='holiday')
In [3]: t2 = Tag.objects.create(name='summer')
In [4]: p = Photo.objects.create()
In [5]: p.tags.add(t1)
In [6]: p.tags.add(t2)
In [7]: p.tags.all()
Out[7]: [<Tag: holiday>, <Tag: summer>]

Utilizzando l' approccio dei filtri concatenati :

In [8]: Photo.objects.filter(tags=t1).filter(tags=t2)
Out[8]: [<Photo: Photo object>]

Query risultante:

In [17]: print Photo.objects.filter(tags=t1).filter(tags=t2).query
SELECT "test_photo"."id"
FROM "test_photo"
INNER JOIN "test_photo_tags" ON ("test_photo"."id" = "test_photo_tags"."photo_id")
INNER JOIN "test_photo_tags" T4 ON ("test_photo"."id" = T4."photo_id")
WHERE ("test_photo_tags"."tag_id" = 3  AND T4."tag_id" = 4 )

Nota che ognuno filteraggiunge di più JOINSalla query.

Utilizzando l' approccio di annotazione :

In [29]: from django.db.models import Count
In [30]: Photo.objects.filter(tags__in=[t1, t2]).annotate(num_tags=Count('tags')).filter(num_tags=2)
Out[30]: [<Photo: Photo object>]

Query risultante:

In [32]: print Photo.objects.filter(tags__in=[t1, t2]).annotate(num_tags=Count('tags')).filter(num_tags=2).query
SELECT "test_photo"."id", COUNT("test_photo_tags"."tag_id") AS "num_tags"
FROM "test_photo"
LEFT OUTER JOIN "test_photo_tags" ON ("test_photo"."id" = "test_photo_tags"."photo_id")
WHERE ("test_photo_tags"."tag_id" IN (3, 4))
GROUP BY "test_photo"."id", "test_photo"."id"
HAVING COUNT("test_photo_tags"."tag_id") = 2

ANDgli Qoggetti ed non funzionerebbero:

In [9]: from django.db.models import Q
In [10]: Photo.objects.filter(Q(tags__name='holiday') & Q(tags__name='summer'))
Out[10]: []
In [11]: from operator import and_
In [12]: Photo.objects.filter(reduce(and_, [Q(tags__name='holiday'), Q(tags__name='summer')]))
Out[12]: []

Query risultante:

In [25]: print Photo.objects.filter(Q(tags__name='holiday') & Q(tags__name='summer')).query
SELECT "test_photo"."id"
FROM "test_photo"
INNER JOIN "test_photo_tags" ON ("test_photo"."id" = "test_photo_tags"."photo_id")
INNER JOIN "test_tag" ON ("test_photo_tags"."tag_id" = "test_tag"."id")
WHERE ("test_tag"."name" = holiday  AND "test_tag"."name" = summer )

Un altro approccio che funziona, sebbene solo PostgreSQL, sta usando django.contrib.postgres.fields.ArrayField:

Esempio copiato da documenti :

>>> Post.objects.create(name='First post', tags=['thoughts', 'django'])
>>> Post.objects.create(name='Second post', tags=['thoughts'])
>>> Post.objects.create(name='Third post', tags=['tutorial', 'django'])

>>> Post.objects.filter(tags__contains=['thoughts'])
<QuerySet [<Post: First post>, <Post: Second post>]>

>>> Post.objects.filter(tags__contains=['django'])
<QuerySet [<Post: First post>, <Post: Third post>]>

>>> Post.objects.filter(tags__contains=['django', 'thoughts'])
<QuerySet [<Post: First post>]>

ArrayFieldha alcune funzionalità più potenti come la sovrapposizione e le trasformazioni di indice .

Questo può essere fatto anche mediante la generazione di query dinamiche usando Django ORM e un po 'di magia Python :)

from operator import and_
from django.db.models import Q

categories = ['holiday', 'summer']
res = Photo.filter(reduce(and_, [Q(tags__name=c) for c in categories]))

L'idea è di generare oggetti Q appropriati per ciascuna categoria e quindi combinarli utilizzando l'operatore AND in un QuerySet. Ad esempio, per il tuo esempio sarebbe uguale a

res = Photo.filter(Q(tags__name='holiday') & Q(tags__name='summer'))

Uso una piccola funzione che itera i filtri su un elenco per un dato operatore e un nome di colonna:

def exclusive_in (cls,column,operator,value_list):         
    myfilter = column + '__' + operator
    query = cls.objects
    for value in value_list:
        query=query.filter(**{myfilter:value})
    return query  

e questa funzione può essere chiamata così:

exclusive_in(Photo,'tags__name','iexact',['holiday','summer'])

funziona anche con qualsiasi classe e più tag nell'elenco; gli operatori possono essere chiunque come 'iexact', 'in', 'contains', 'ne', ...

queryset = Photo.objects.filter(tags__name="vacaciones") | Photo.objects.filter(tags__name="verano")

Se vogliamo farlo in modo dinamico, seguiamo l'esempio:

tag_ids = [t1.id, t2.id]
qs = Photo.objects.all()

for tag_id in tag_ids:
    qs = qs.filter(tag__id=tag_id)    

print qs