Data-node Alive от ambari не стабилен

Question

у нас есть версия кластера ambari - 2.6.1 и hadoop version 2.6.4

число датодов - 10

с панели мониторинга ambari мы можем увидеть окно, показывающее следующее:

   DataNodes Live

   9/10

но через несколько минут все датододы оживают как:

   DataNodes Live

   10/10

и снова через несколько минут мы снова видим

   DataNodes Live

   9/10

кажется, что у наменода нетПолучил сообщение сердцебиения от датоде в течение более чем интервала, затем он будет помечен и как «мертвый»

мы проверим следующее:

1. разрешение хоста - ОК (DNS в порядке)
2. Разрешение IP - в порядке (DNS в порядке)
3. Проверка службы HDFS прошла успешно
4. Работает каждый датодан (ps -ef | grep datanode | grep -vgrep)
5. netstat -anp |grep '0.0.0.0:50010' порт в порядке
6. systemctl status firewalld.service (брандмауэр выключен, как и должно быть)
7. sestatus Состояние SELinux (отключено)
8. MTUнастроен на 9000 (и мы проверяем, что 9000 установлен правильно на всех компонентах

, что мы можем сделать еще для того, чтобы проверить, почему DataNode жива нестабильна?

Answer 1

с тех пор мы увеличили размер кучи узла данных со значения по умолчанию - с 2G до 6G, теперь узел данных жив на панели мониторинга ambari стабилен