Você não deve editar o data/postresql.conf diretamente, pois esta configuração é regenerada após o início/reinicialização do aplicativo.
Adicionei
OPENSHIFT_POSTGRESQL_LOCALE
variável de ambiente que você pode usar para alterar a localidade padrão. Deve estar disponível na próxima versão do Online. https://github.com/openshift/origin-server/pull/5664
Obrigado por relatar isso! Se você precisar de mais ajustes de configuração, abra um bug :-)