Моя искровая работа: def saveCount(spark: SparkSession, cnt: Long): Unit = { val fs = FileSystem
Я пытаюсь удалить текст ASCII Spark из консоли. Есть ли где-нибудь файл конфигурации или команда,...
Я передаю двоичные данные в скрипт Python на кластере Hadoop с помощью интерфейса командной строки...
У меня есть внешняя таблица куста в 1 базе данных с 600 миллиардами записей и 100 столбцами. Мне...
У меня большой (> 500 м ряд) файл CSV.Каждая строка в этом CSV-файле содержит путь к двоичному...
Как войти в HDFS, используя стандартную библиотеку журналов. В частности, я использую...
Я новичок в улье / hadoop.Я читал / смотрел документацию, видео о том, как hive, hdfs, hadoop...
Я пытаюсь установить образ песочницы hadoop по ссылке https://hortonworks
Я уже установил другой конфиг, я следую инструкциям из этого https://www.youtube.com/watch
Я настроил кластер hadoop2 и могу отправить пример задания wordcount с помощью команды hadoop jar....
Я успешно установил один узел Hadoop и Hbase .Я использую Java-агент для подключения к Hbase.После...
Я запускаю два hiveql с простым предложением выбора.Когда файлы hiveql предоставлены для работы, я...
Я создал следующие JavaPairRdds из данных, полученных от разных конечных точек API....
Я уже сделал кластер Hadoop с 3 узлами (hadoop-master, hadoop-data1, hadoop-data2).Кажется, это...
Я пытаюсь настроить спарк с мета-хранилищем улья, чтобы получить доступ к таблицам улья из спарк....
У нас есть транзакционные почасовые данные и данные ежедневной массовой загрузки из операционных...
Я пытаюсь выполнить простой запрос на движке Hive - Spark: SELECT count(*) FROM...
У меня есть кластер Hadoop из трех контейнеров на трех разных хостах; детали в следующем: Сначала я...
Я импортировал данные из СУБД в HDFS через sqoop с помощью следующей команды: sqoop import...
Я хочу измерить загрузку ЦП, памяти и т. Д. Моего кластера Hadoop. У меня нет такой системы...
Я хочу написать сценарий оболочки, который будет перебирать все файлы в каталоге HDFS и получать...
Я сохранил некоторые идентификаторы в именах текстовых файлов trainTestID.txt. Мне нужны эти...
Я выполняю задание Spark с использованием Scala, но оно застревает, не выполняя и задачи моих...
Я установил PySpark на Windows и у меня не было проблем до вчерашнего дня.Я использую windows 10,...
У меня проблема при запуске Sahara API. У меня есть это сообщение об ошибке: Мой файл конфигурации...