Я могу создать каталог с помощью приведенной ниже команды, но не могу создать подкаталог под уже...
Я использую документацию confluent, но когда я добавляю разъем hdfs-sink, я получаю эту ошибку:...
у меня струится искра (2.1.1 с cloudera 5.12). с входной кафкой и выходной HDFS (в формате паркета)...
import subprocess def run_cmd(args_list): print('Running system command: {0}'
У меня есть большой файл, хранящийся в HDFS, где в последнем столбце у меня есть машинный адрес, я...
При попытке создать каталог в hdfs появляется следующее сообщение об ошибке. Я установил все...
Я видел несколько вопросов о записи одного файла в hdf, кажется, достаточно использовать...
Я новичок в Hadoop и пытался создать автономный сервер Hadoop в VMware, следуя этим инструкциям....
Я использую Spark 2.2.0 и Scala 2.11.8 в среде Spark-Shell. У меня есть фрейм данных df, и мне...
как проверить количество edgenods, если я хочу проверить namenode, я использую команду: hdfs...
В hadoop v 1 namenode - единственная точка отказа, но hadoop v 2 преодолевает эту проблему, но как...
Сценарий / Детали кода Я создаю объект сеанса искры для хранения данных в таблице кустов, как:...
Справочная информация: Я работаю с Dataiku DSS, HDFS и многораздельными наборами данных. У меня...
Я использую структурированную потоковую обработку для обработки данных из потокового источника...
После переноса моих данных (предположим, таблицы) в HDFS я понятия не имею, как реплицируются мои...
Я всегда предполагал, что ответ - да, HDFS реализована поверх хранилища Hadoop Key-Value, но я не...
Может ли кто-нибудь указать мне URL-адрес, который объясняет, как данные передаются из S3 в память...
Я пытаюсь экспортировать данные из местоположения hdfs в пользовательскую схему Greenplum (не по...
У меня уже есть таблица MySQL на самой локальной машине (Linux), и у меня есть внешняя таблица Hive...
Как синхронизировать папки между NFS и HDFS без монтирования NFS на сконфигурированном сервере HDFS
В настоящее время я снимаю данные с узла в моем кластере HDFS. Я заметил, что некоторые датододы...
Я копирую 800 avro файлов , размер около 136 МБ , из HDFS в S3 на EMR кластер , но я получаю это...
Ожидаем ли мы какой-то сбой или определенные настройки имеют приоритет? В моем конкретном случае я...
Мне нужно писать в Hadoop около 150B вложенных записей Json в день (используя Spark Java), Что...
В настоящее время я выполняю следующую команду sqoop merge --new-data / home / part1 / part-m-00000...