Я установил небольшой размер кластера oop (2.7). В нем 5 работников. Для одного узла у меня возникла следующая проблема, и эти узлы стали нездоровыми.
1/1 local-dirs are bad: /home/hduser/hadoop_store
После некоторого поиска я обнаружил, что это проблема с заполнением диска. Я добавил еще 2 диска ТБ. Я чищу оба диска и перезагружаю кластер. Через несколько дней один диск используется только 59%, а другой - 96,0% на этом компьютере. Из-за чего та же ошибка возникла снова и этот узел стал здоровым. В чем проблема?
Нужно было oop перебалансировать оба диска на этом узле отдельно, или я должен сделать что-то еще. 