Hadoop YARN: как управлять вводом / выводом - PullRequest
0 голосов
/ 23 октября 2018

Насколько я знаю, Hadoop YARN может управлять только процессорами и памятью (и с устройствами Hadoop 3.0, такими как FPGA / GPU. Однако я хотел бы управлять вводом / выводом.

Есть ли вариант, если яотсутствуют? Какие возможности доступны для управления вводом / выводом на YARN?

1 Ответ

0 голосов
/ 23 октября 2018

Hadoop явно не поддерживает управление вводом / выводом.Самое близкое, что вы можете получить, это, вероятно, счетчики MapReduce, где вы можете отслеживать прочитанные байты и записанные байты.Если вы хотите управлять им, вам придется отслеживать их внешне, возможно, с помощью некоторого промежуточного программного обеспечения управления.

...