Eu vi vários problemas que têm esse problema ao fazer ações simultâneas. Veja por exemplo este tópico (arremesso + serviço) e este (desenho na tela a partir de 2 fios).

Você está falando de um ouvinte personalizado em uma classe diferente, será que você também está fazendo várias coisas ao mesmo tempo?