Exemplo de fazer uma junção com base em FIND_IN_SET
SELECT *
FROM imap_emails
INNER JOIN customers
ON FIND_IN_SET(customers.email, imap_emails.to) > 0
Você não diz como deseja restringir isso (ou seja, se um e-mail usa 2 endereços de e-mail, você quer que ambos os e-mails sejam devolvidos), então não pode adicionar muito neste estágio.