Constantes de caractere precisam de aspas simples .
Use:
INSERT INTO users(user_name, name, password,email) VALUES ('user2','first last','password1', '[email protected]' );
Veja o manual:postgresql.org/docs/current/static/…
Nota:depois que encontrei o mesmo problema e quase perdi a resposta que existe nesta página (na seção de comentários), graças a @a-horse-with-no-name - postei esta resposta>