Som det visade sig glömde jag att lägga till sqlparse till min requirements.txt och därför kunde heroku inte köra Djongos analys av SQL till noSQL. Baserat på det här problemet det verkar som om version 0.2.4 är den mest stabila versionen att använda.
requirements.txt
django==2.2.12
djongo==1.3.2
gunicorn==19.9.0
django-heroku==0.3.1
django-crispy-forms==1.9.0
dnspython==1.16.0
sqlparse==0.2.4