Как прочитать часть набора данных файла Azure (содержащего 1000 изображений) в разных узлах поезда. Мне нужна выборка, в которой все изображения покрыты.
https://docs.microsoft.com/en-us/python/api/azureml-core/azureml.data.file_dataset.filedataset?view=azure-ml-py
Я ищу вариант, подобный тензор-поток.dataset.shard (). Благодаря.
Вы можете использовать ParallelRunStep в конвейерах с FileDataset в качестве входных данных. См .: https://docs.microsoft.com/en-us/azure/machine-learning/how-to-use-parallel-run-step и https://docs.microsoft.com/en-us/python/api/azureml-contrib-pipeline-steps/azureml.contrib.pipeline.steps.parallelrunstep?view=azure-ml-py