Parece que tenho o mesmo problema no gitbash, mas ao usar o prompt de comando, parece funcionar.
No prompt de comando, isso funciona:
heroku pg:psql --app={appnameinheroku}
. Você pode ver os aplicativos que você tem que escolher executando
heroku apps
.