Intente agregar un índice a (DUEDATE_, REVERSEPRIORITY_) en ese orden. Seguirá usando filesort (creo) pero en muchas menos filas.
También intente OPTIMIZE TABLE table_name su tabla y CHECK TABLE table_name su tabla (para que mysql vuelva a calcular los valores de índice).
Todo esto es solo una conjetura educada.