DONDE NO EXISTE en PostgreSQL da error de sintaxis

Haz en su lugar:

INSERT INTO live.users ("website", "age") 
SELECT 'abc', 123
WHERE NOT EXISTS (SELECT age FROM live.users WHERE age = 123);