El comentario de Ali Nikneshan en la respuesta ahora eliminada me salvó un par de veces cuando tuve el mismo problema. No estoy seguro de por qué se eliminó, pero aquí lo vuelvo a publicar con la esperanza de que ayude a alguien:
pip install -U --no-cache-dir --force psycopg2
