Я знаю, что увеличение числа рабочих уменьшит общее время, затрачиваемое на чтение партий, но я обнаружил, что фактическое время обучения scores = Model(batch)
будет занимать все больше и больше (оно будет маленьким, но будет увеличиваться) по мере продолжения обучения внутри петли
for i, batch in enumerate(train_data_loader):
С другой стороны, если num_workers
равно 0
, время тренировки будет постоянным на протяжении всего цикла обучения.
Это нормально? Или это происходит только со мной?