Isso obterá 500 itens a cada iteração:
count = Model.objects.count()
chunk = 500
for i in range((count/chunk)+1):
objs = list(Model.objects.all()[i*chunk:(i+1)*chunk])
Você também pode dar uma olhada no iterador do método QuerySet( ) .
count = Model.objects.count()
chunk = 500
for i in range((count/chunk)+1):
objs = list(Model.objects.all()[i*chunk:(i+1)*chunk])