Django - Boş categoriyi listelememek

Merhaba,

Django'da blog isimli bir uygulama ve altında Category, Post isimli modellerim var.
Post modelimde categories alanım Many to Many ile Category modeliyle ilişili.
Ben views'de kategorileri çekerken eğer kategoriye ait post girilmemişse listede gözükmemesini istiyorum.
Bunu nasıl yaparım?

kategori için bir boolean bir değer belirle(orn kontrol) post listesinin değeri null ise false null değilse true dön daha sonrada
queryset=category.objects.filter(control=true)