Как я могу отправить в удаленный кластер распределенных объектов, исходный код которых существует только локально?

Question

У меня есть удаленный распределенный кластером кластер, в который я хочу отправить серию объектов, которые будут использоваться во время вычислений. Проблема заключается в том, что исходный код, который определяет классы этих объектов, существует только локально, и, как следствие, травление не работает. Есть ли другой способ отправки этих объектов без предварительного перемещения кода в кластер?

Answer 1

Вы можете использовать Client.upload_file для отправки небольших исходных файлов вашим работникам.

В противном случае вам нужно будет убедиться, что программная среда между вашим клиентом и работниками одинакова.Обычно люди делают это, полагаясь на сетевую файловую систему или образы Docker.