Есть три типа параллельных вычислений. Это вычисления с интенсивным использованием io, интенсивным процессором и интенсивным использованием io-cpu. Если ваш поток выполняется в задаче с интенсивным использованием ЦП, то вы можете увеличить количество рабочих, если хотите повысить производительность. Но если он работает с интенсивным использованием io, их увеличение не повлияет.
Кажется, вы работаете над задачей с интенсивным использованием io-cpu. Итак, если вы увеличите количество рабочих, вы можете получить хороший результат до тех пор, пока не будет конкуренции за использование ресурса io (жесткого диска), поэтому на локальной машине. это не лучший выбор для увеличения числа рабочих.
Вы можете использовать Had oop на GPS или AWS для этой работы.