Производительность редуктора в Hadoop - PullRequest
0 голосов
/ 26 августа 2018

Существует ли простой способ (способ API) для измерения производительности редуктора (сокращения задачи) в Apache Hadoop (версия 2.6.5, если это имеет значение).

  1. Измерение времени завершения (от запусказадача до ее завершения) задачи сокращения?без измерения времени до и после в JAVA?
  2. Нахождение, где задачи уменьшения были активированы до или после их запуска?без (снова) использования какого-либо Java-кода в классе редуктора.

Кроме того, есть ли (простой) способ вставить больше переменных во «внутренние функции»?который мы иногда переопределяем, например, getPartition внутри класса Partitioner (или используем неустановленную / неиспользуемую переменную, которую я могу легко изменить с помощью API, например, setNumReduceTasks)

...