U moet de psycopg2 . toevoegen installatie naar uw requirements.txt het dossier. Het is de database-adapter - de manier waarop python communiceert met de PostgreSQL hoeft u inderdaad niet te installeren omdat Heroku dat wel doet.
Voeg gewoon de regel toe psycopg2==2.4.4 naar uw requirements.txt het dossier.
De toevoeging van de database-add-on zelf is trouwens niet nodig. dj-database-url regelt het automatisch. Bekijk de heroku-documenten
voor een stapsgewijze handleiding.