Установите количество картографов и редукторов вручную в hadoop - PullRequest
0 голосов
/ 03 июня 2018

У меня есть приложение, в котором оно запускает несколько карт и сокращает количество заданий, у меня есть несколько клиентов, в которых размер данных различен, я хочу получить номер карты, назначенной для каждого задания, и вручную установить количество редукторов,

Есть еще один senario, где есть 0 картографов, а framework назначает 1000 редукторов, которые бесполезны

Как я могу справиться с таким сценарием или есть какой-то способ, которым мы можем обработать программно.

...