Tente adicionar um índice a (DUEDATE_, REVERSEPRIORITY_) naquela ordem. Ele ainda usará filesort (eu acho), mas em muito menos linhas.

Tente também OPTIMIZE TABLE table_name sua tabela e CHECK TABLE table_name sua tabela (assim o mysql irá recalcular os valores do índice).

Isso tudo é apenas um palpite educado.