O comentário do OP é confirmado em psycopg/psycopg2 issue 594

O problema foi corrigido em #489 lançado em psycopg 2.7. Não temos planos de fazer backport da correção para 2.6.

Use um pg_config de uma versão de produção do Postgres não de 10 beta 4.

Consulte PR 504