Você simplesmente precisará executar um ALTER em cada uma das tabelas da seguinte forma:
ALTER TABLE <table name> COLLATE utf8_general_ci;
Se você também precisar atualizar a codificação de caracteres existente (improvável pelos sons das coisas), você pode usar:
ALTER TABLE <table name> CONVERT TO CHARACTER SET utf8 COLLATE utf8_general_ci;