Necesitas agregar el psycopg2 instalación a su requirements.txt expediente. Es el adaptador de la base de datos:la forma en que Python interactúa con PostgreSQL que, de hecho, no necesita instalar porque Heroku sí lo hace.
Simplemente agregue la línea psycopg2==2.4.4 a sus requirements.txt expediente.
Por cierto, la adición del complemento de la base de datos en sí no es necesaria. dj-database-url se encarga automáticamente. Consulta los documentos de heroku
para obtener una guía paso a paso.