Как ограничить случайное чтение и запись при выполнении алгоритма Spark ML - PullRequest
0 голосов
/ 31 августа 2018

Я использую модель ALS для системы рекомендаций. Я заметил, что подавляющее большинство времени выполнения тратится на произвольное чтение / запись. Кажется, я не могу найти способ сократить время, затрачиваемое на это. Я пытался изменить номера разделов, сохранить, изменить параллелизм по умолчанию и т. Д. У меня ничего не получалось. Есть идеи?

...