У меня есть 5-ти узловый кластер HDP версии 3.1.1. В этом 2 узла Name и 3 узла данных. Я...
Справочная информация: Наша группа проходит обновление Cloudera до 6.1.1, и мне было поручено...
Я создал кластер Raspberry pi с установленными Spark и Hadoop и сделал несколько функций в .bashrc,...
Я пишу bash-скрипт для экспорта динамического SQL-запроса в hql-файл в каталоге HDFS. Я собираюсь...
Я получаю следующую ошибку при работе на локальном EC2 с 'hadoop-3.1.1' и 'spark-2.4
Предположим, что я хочу переместить CSV-файл из /home/user в /hdfs/data/adhoc/PR/02/RDO0/OUTPUT/...
Я просто хочу пояснить, как работает HBASE checkAndPut, основываясь на документации HBASE, Атомно...
Я просто пытаюсь создать таблицу в кусте, которая хранится в виде файла паркета, а затем...
Я настроил oozie 4.3.0 с Hadoop 2.8.1 согласно http://hadooptutorials
Существует один файл размером 60 ГБ и 200 000 000 строк. Полезная нагрузка файла показана ниже....
Мне нужно запустить какой-нибудь собственный скрипт для кластера hadoop от ambari. Сценарий...
Я пытаюсь построить Azkaban сольный сервер , но я получил ошибку при выполнении ./gradlew build...
У меня есть Nifi, настроенный на получение файлов из SFTP, а затем помещать их в папки HDFS на...
Мой вопрос очень похож на Grep для нескольких файлов в файловой системе Hadoop Однако в моем случае...
Я пытаюсь перейти от кластера Hadoop к Teradata, используя Teradata Connector (TDCH). Весь процесс...
Если я использую copyFromLocalFile() для помещения файла в HDFS с перезаписью, установленной на...
У меня есть долгосрочное задание на структурированную потоковую передачу Spark, запущенное в Google...
В моем проекте мы использовали большие двоичные объекты в Azure. Мы смогли загрузить файлы ORC в...
Я пытаюсь записать данные SAS в Hive, используя SAS. У меня есть переменная ID в таблице длиной> 15...
Я использую Azkaban executor и веб-приложение. Я создал новый проект с помощью веб-интерфейса. Я...
Я хотел бы проверить свой код, вызывая пример класса org.apache.hadoop.hdfs.MiniDFSCluster. Однако...
Я запускаю приложение spark на пряже в AWS EMR, и я получаю спам от МБ этой ошибки: 19/09/30...
Я хочу проверить, существует ли файл с определенным именем в указанном месте HDFS. Имя моего файла...
Я пытаюсь программно получить все файлы по заданному пути, используя код Java public static...
У меня есть некоторые данные доменов, например, страницы и т. Д., В таблице hbase. Я должен...