Você precisa adicionar o psycopg2 instalação em seu requirements.txt Arquivo. É o adaptador de banco de dados - a maneira como o python interage com o PostgreSQL você realmente não precisa instalar porque o heroku o faz.

Basta adicionar a linha psycopg2==2.4.4 para seu requirements.txt Arquivo.

A adição do complemento de banco de dados em si, a propósito, não é necessária. dj-database-url cuida disso automaticamente. Confira os documentos do heroku para um guia passo a passo.