у нас есть 3 машины kafka в нашем кластере, версия kafka - 0.10.0.2.6 , и версия 3 серверов...
Я использую сжатие lz4 и записываю данные в таблицу кустов, эта таблица содержит 20 файлов, каждый...
Как найти полный путь к хранилищу HDFS в моей системе?например, у меня есть / user / cloudera /...
Как и ожидалось в названии, у меня есть некоторые проблемы при отправке задания на спарк-кластер,...
Я пытаюсь скопировать данные из одного кластера hdfs в другой, используя команду distcp. Ниже...
У меня есть требование в моем текущем проекте, я получаю данные из исходной базы данных Oracle и...
У меня настроены Apache Hbase, Nutch и кластер Hadoop.Я просканировал несколько документов, т.е....
У меня есть ряд задач Mapper и Reducer, которые я выполняю через пользовательские шаги jar на aws.Я...
Я пытаюсь построить «озеро данных» с нуля.Я понимаю, как работает озеро данных и какова его...
У меня есть namenode, чей fsimage поврежден, и у меня есть только один доступный fsimage в каталоге
Я искал в Google, но не нашел его, возможно ли создать ссылку между папкой HDFS на локальную папку?...
Итак, я пытаюсь создать модульный тест для моей функции отображения Hadoop, используя Mockito.Я...
Я изо всех сил пытаюсь написать наиболее эффективный способ написания SQL-запросов, который...
Получение следующих ошибок при запуске start-dfs.sh для запуска сервисов hadoop: Starting namenodes...
Я успешно установил Intellij, смог запустить простой Java-код;однако, ссылаясь на библиотеки Hadoop...
Я использую Hadoop на моей локальной машине (12 ГБ ОЗУ).Когда я запускаю задание для большого файла...
Похоже, что Hortonworks Hive Warehouse Connector до v.1.0.0 не поддерживает обновления схемы.Я...
Cloudera Manager не запускает DataNode, продолжает выдавать приведенное ниже исключение Exception...
У меня есть namenode, чей fsimage поврежден, и у меня есть только один доступный fsimage.У меня...
Я сталкиваюсь с ошибкой в Sqoop 1.99.7 на Hadoop 3.2.0.Прилагаются ошибки.Не уверен, что кто-то...
У меня установлен MySql в локальной системе, и у него есть база данных employee , я хочу перенести...
Я пытаюсь развернуть gobblin на пряже и успешно отправить задание GobblinYarn в мой кластер. Но не...
Я новичок в hadoop Просто прочитайте, что Hadoop HDFS основана на плоских файлах , в то время как...
Использование приведенной ниже команды для чтения файла CSV. spark.read
У меня есть задание Apache Spark, которое записывает набор данных паркета в хранилище BLOB-объектов...