Я написал небольшое приложение на python, которое принимает запросы и выполняет задания pyspark в...
Я пытаюсь использовать Hadoop с Docker Toolbox в Windows 10 Family. Итак, я следовал этой...
Название вопроса является исключением, которое я получаю при установке Hadoop-2.9.1 на Windows 10....
Как преобразовать строки в два столбца в одной и той же таблице кустов Это таблица: |ID | type |...
Я пытаюсь найти последнюю версию Hadoop, доступную в докере.Существует ли официальный репозиторий...
Я новичок в разработке данных.Я пытаюсь настроить среду для проекта больших данных.На данный момент...
У нас много запросов на улей, которые занимают много времени. Мы используем tez и другие хорошие...
Я установил кластер CDH5 (версия cdh5.15.1) на узлы Ubuntu, и я хочу установить Hadoop-клиент на...
У меня есть раздельный zip-файл (созданный winzip в окне ), затем ftp на сервер hadoop.Каким-то...
У меня есть данные, которые я хочу загрузить в HDFS. папка с данными является многослойной, но...
Я успешно установил Azkaban.Веб-страницу можно посетить, и с помощью jps я вижу два процесса:...
Я нахожусь в процессе перехода от HDP к AWS EMR. В рамках этой работы мы создаем таблицы в EMR Hive...
Как преобразовать строковый тип, такой как t1.updte_timestamp 2018-06-02-08.18.45.562742...
Привет, я новичок в Hadoop и sqoop. Может кто-нибудь сказать мне команду sqoop удалить таблицу из...
Я провожу несколько экспериментов с размером блока (dfs.block.size) и размером группы строк...
Я пытаюсь отобразить день предыдущей даты.Пожалуйста, смотрите ниже.Я могу сделать это для текущей...
Я получаю InternalDir ViewFileSystem только для чтения ошибка при попытке удалить файл с помощью...
Hadoop имеет 3 коэффициента репликации, верно? Если я изменю одну реплику, две другие реплики также...
Я пытаюсь понять MapReduce, так что это очень нубский вопрос.Я смотрю на картинку ниже.Насколько я...
Sys.setenv(HADOOP_CMD="/home/hduser/hadoop-2.7.7/bin/hadoop") Sys
Не удалось найти достаточно информации в интернете, поэтому спрашивайте здесь: Предполагается, что...
Я читаю этот вопрос , пытаясь реализовать зависимости от задач других DAG s. В этом примере...
Я хотел бы записать всю таблицу в s3a в формате паркета. Давайте назовем таблицу abc_schem
Помогите мне решить следующую ошибку Hadoop: Я хочу запустить модуль MRJob Python mrjob_word_count
Мы используем HDP HDFS модуль версии 2.7.3.2.6.5.0-292. Сервер завис, и его пришлось перезагружать...