Я создал диаграмму, которая представляет, как работает инфраструктура MapReduce.Может ли кто-нибудь...

У меня есть сценарий, в котором у нас есть огромный tar-файл в HDFS, из которого нужно извлечь...

заранее спасибо за помощь! когда я запускаю% HADOOP_HOME% \ sbin \ start-dfs.cmd, он работает тогда...

Я работаю над подходом к обновлению файлов HDFS, в то время как другие потребители / приложения...

Я успешно керберизовал тестовый кластер Hortonworks.Ambari создал ключевые таблицы для сервисов, и...

Какие критерии применяются к процессу преобразования в ELT в hadoop Также загружаются извлеченные...

Я знаю, что MSCK REPAIR TABLE обновляет метастор с текущими разделами внешней таблицы. Для этого...

У меня есть полностью распределенный трехузловой кластер Hadoop (1 namenode и 2 datanodes) с...

У меня есть куча данных (на S3), которые я копирую в локальную HDFS (на Amazon EMR).Сейчас я делаю...

Мой вопрос больше связан с реальным кодом.Я работаю над Hadoop 2.7.7. Кажется, я понимаю, что после...

В моем проекте есть требование обрабатывать файлы сообщений (.txt) в режиме реального времени.Я...

Итак, я пытаюсь подключиться к серверу HDFS через R удаленно на компьютере с Windows. Однако я...

У меня есть сотни тысяч маленьких CSV-файлов в формате hdf.Прежде чем объединить их в один фрейм...

у нас есть версия кластера ambari - 2.6.1 и hadoop version 2.6.4 число датодов - 10 с панели...

я хорошо запускаю отправку spark с --master local[*], , но когда я запускаю отправку spark на моем...

Я копирую файл, обработанный в локальной системе, в путь HDFS (который связан с таблицей HIVE) с...

Привет, я пытаюсь переместить данные в формате csv из kafka в hdfs, используя соединитель приемника...

У меня есть приложение ac #, которое создает и загружает файлы паркета в удаленную HDFS.Если я...

Когда я пытаюсь импортировать данные из Oracle в HDFS, используя следующий синтаксис: ./sqoop...

с компьютеров с датодами (у нас есть 4 машины с датодами в кластере ambari) мы можем увидеть...

Я пытался защитить свой кластер Horton, чтобы авторизация проходила через Ranger для доступа к...

У меня есть около 1500 файлов XML в HDFS, каждый из них составляет около 2-3 ГБ.Мне нужно написать...

Я пишу Kafka Producer, который использует HDFS INotify API для мониторинга определенного каталога и...

У меня есть следующие файлы в HDFS - abc_20181203-010000 cde_20181203-020000 fgh_20181203-030000...

Я новичок в Apache Spark.Я пытаюсь настроить Apache Spark на свой Macbook.Я загружаю файл "spark-2