Вы должны увеличивать приоритет только для потоков, которым требуется более высокий приоритет в системе, а не только потому, что они работают медленно. Приоритет означает, что ваш поток следует считать более важным, чем другие потоки. В этом случае я не думаю, что это так.
Если вы снизите приоритет, вы, вероятно, обнаружите, что он работает медленнее, поскольку выполнение других задач может занять время.
Что вам нужно сделать, это пересмотреть вашу обработку, возможно, добавить потоки (или несколько потоков) или подумать, как обработка может быть улучшена другими способами. Prioirty это не ответ.