Depois de ler com mais atenção o manual de referência, descobri que a maneira correta de escrever a lista de colunas é no final da frase:
load data infile '/path/to/my/file.csv'
into table myTable
fields terminated by ',' optionally enclosed by '"'
lines terminated by '\n'
ignore 1 lines
(field1, field2, field3,..., fieldk); -- The field list goes here
Neste momento, estou me sentindo muito burro... mas coloquei esse conhecimento aqui, caso alguém esteja enfrentando o mesmo problema.