Мы используем Dask для распределения вычислительных задач по нескольким серверам.Есть 1...
Информация о системе: CentOS, python 3.5.2, 64 ядра, 96 ГБ ОЗУ Итак, я пытаюсь загрузить большой...
У меня есть следующий вариант использования, и мне интересно, поддерживается ли он в dask /...
Я пытаюсь запустить кластер dask через SSH, но я сталкиваюсь со странными ошибками, подобными этим:...
Я выполняю dask over slurm через jobqueue и получаю три ошибки довольно последовательно ... По сути...
Я хочу принудительно уничтожить все процессы dask-worker, связанные с моим dask.distributed...
Попытка инициализировать клиента с локальным кластером в лаборатории Jupyter, но зависает. Такое...
Я попытался использовать dask_jobqueue для запуска кластера и успешно запустил много запущенных...
Я пытаюсь использовать Dask для параллельной обработки на нескольких узлах на суперкомпьютерных...
В документах говорится: Debug Worker pages for each worker at http://worker-address:8789. These...
Есть ли способ сохранить отображаемую (поверх Bokeh) распределенную историю dask? Я хотел бы...
У меня есть набор данных, хранящийся в текстовом файле с разделителями табуляции.Файл выглядит...
Я надеюсь получить представление о том, как распределенный dask управляет распределением задач из...
У меня есть динамический кластер Dask Kubernetes.Я хочу загрузить 35 файлов паркета (около 1,2 ГБ)...
Я пытаюсь выполнить простое смущающее параллельное чтение 24 файлов научных данных, каждый размером...
Я читаю документацию по dask.distributed и похоже, что я мог бы передавать функции в распределенный...
Как лучше всего распределить задачу по набору данных, использующему относительно дорогой для...
Мы наблюдаем странное поведение распределенного планировщика dask. С 200 работниками мы...
На основе документации streamz можно использовать распределенный кластер dask следующим образом:...
Для dask_jobqueue, можно ли передавать SGECluster и scheduler_file при создании Client? Примерно...
Для dask_jobqueue возможно ли создать кластер в нескольких очередях и распределить рабочих по...
Я хочу дать моему dask.array размер куска.Моя X_arr форма (nan, 20).И я решил сделать это с помощью...
У меня небольшое приложение Dask (~ 20 узлов в DAG).Я хотел бы иметь возможность каким-то образом...
Я использую dask-yarn версии 0.3.1.Следуя базовому примеру на https://dask -yarn.readthedocs.io /...
Весь этот код работает в пандах, но однопоточный запуск выполняется медленно. У меня есть объект...