Я пытаюсь прочитать текстовый файл из локального в pyspark DF. с df = spark.read

Когда я смотрю на комментарии к столбцам в нашем озере данных (Hadoop, комментарии, сделанные во...

У меня есть набор данных, включающий A B C 1 2 43 2 3 12 , затем я хочу уменьшить его, чтобы...

Логика моего разделителя - import org.apache.hadoop.io.DoubleWritable; import org.apache.hadoop.io

Я работаю над извлечением изображений и векторов движения каждого извлеченного изображения (4...

У меня есть три топологии, слушающие одну и ту же тему Кафки и записывающие данные в разные таблицы...

Я новичок в менеджере Cloudera, пытаюсь написать собственную службу для запуска моего процесса в...

Я застрял с ошибкой org.apache.spark.sql.hive.HiveSessionState, когда пытался прочитать csv-файл с...

У меня проблема, я пытаюсь запустить карту и уменьшить функцию во время выполнения. В моем примере...

Я хочу импортировать некоторые таблицы из Oracle Essbase в Озеро данных Cloudera . Мы не можем...

Я пытаюсь настроить Hadoop на своем локальном компьютере, и я застрял на этом. ▶ hadoop fs -mkdir...

Я пытаюсь установить Spark на Hadoop-Yarn, и я получаю сообщение об ошибке, которое, по моему...

Я набрал команду "hdfs namenode -format", чтобы установить namenode. Но я получил ошибку, как...

Я только что прочитал эту статью: https://www.mongodb

Согласно https://github.com/Intel-bigdata/HiBench/wiki/Advanced-Configurations Параметры сжатия...

В настоящее время я решаю проблему с полосами подсчета биграмм, используя карту Hadoop Reduce. Мне...

Мы внедряем систему распределенных вычислений с малой задержкой с кластером Apache Ignite. Все...

Я пишу карту уменьшения алогирта. В моем коде метод reduce(Text key, Iterable<String> values,...

Я создал каталог и установил квоту в HDFS с помощью следующих команд: hdfs dfs -mkdir...

Я успешно установил hadoop на локальном компьютере, выполнив следующие действия Пошаговая установка...

У меня задание hive ql main.sql, вызываемое через скрипт оболочки main.ksh. Сценарий запланирован,...

У меня есть запись конфигурации в yarn-site.xml следующим образом: <property>...

Я получаю сообщение "Не удалось указать имя участника Kerberos сервера" при попытке подключиться к...

Я пытаюсь подключиться к Impala, используя аутентификацию JDBC и Kerberos в Java. У меня есть 2...

У меня есть рабочий процесс oozie, который вызывает скрипт оболочки. Сценарий оболочки вызывает...