Каталог hdfs недоступен webhdfs после сохранения большого количества файлов данных - PullRequest
0 голосов
/ 26 ноября 2018

Я создал каталог и храню файлы данных в реальном времени (которые я получаю в большом количестве).Изначально я могу получить доступ к каталогу через webhdfs, но после того, как количество файлов данных увеличится после ограничения, я больше не могу получить доступ к каталогу.Команда curl: curl -i "http://host:port/webhdfs/v1/path?op=LISTSTATUS" работает нормально и перечисляет все файлы данных. Также может перемещаться по структуре каталогов с помощью команды hdfs. Но только webhdfs не работает. Просто не работает.

WebHDFS уже включена. Попытка установки максимального значения элементов в каталоге на максимальное значение. Попытка установки socket.read_timeout равной 300 с (5 мин), но ничего не используется.

Пожалуйста, предложите.

...