Este parece ser um problema relacionado ao RDS, onde, após alguns minutos, vi que um patch é aplicado ao RDS por meio dos logs de eventos. Após a aplicação do patch, execute o alter extension postgis update comando atualizar com sucesso a extensão PostGIS. Fechando essa pergunta por enquanto.