Consegui melhorar o desempenho alterando o banco para sqlite3 e informando no INSTALLED_APPS
apenas os apps que eu quero testardirecionando o teste para um app específico:
settings.py (ao final do arquivo):
import sys
if 'test' in sys.argv:
DATABASES['default'] = {
'ENGINE': 'django.db.backends.sqlite3',
'NAME': 'test_db'
}
terminal:
$ INSTALLED_APPS./manage.py =test ('meuapp',)animals.tests
Ao rodar o teste o tempo caiu para 5 segundos.