Я пытался создать искровую среду на CentOS6.8 на macOS с использованием VMware Fusion. Я ранее...

У меня есть таблица ниже: hive> desc flightdelays2; OK airline string air_id string...

У нас есть скрипт, который отображает данные в фрейм данных (мы используем pyspark).Данные...

Недавно я установил настройки hadoop в псевдораспределенном режиме, и я создал данные и загрузил их...

Я настроил кластер hadoop с одним главным узлом и 3 датодами.Когда я пытаюсь запустить задание...

val driverClassName = "org.apache.hive.jdbc.HiveDriver"; Class.forName(driverClassName);...

Я столкнулся с проблемой при настройке 4-кластерной архитектуры hadoop, следуя этому руководству У...

Я слышал, что Apache Crunch - это фасад, и он может запускать приложения без Hadoop.Это правда?...

Что я хочу: для разработки функции MapReduce, которая имеет Ввод: key1 \ t A1 \ t B1 key2 \ t A2 \...

Я использую Hadoop из Docker Swarm с 1 наменодом и 3 датододами (на 3 физических машинах).Я также...

Я недавно использую Spark 1.5.1 для обработки данных hadoop.Тем не менее, мой опыт Spark не очень...

Я создаю таблицу кустов из scala, используя следующий код: val spark = SparkSession .builder()

У меня есть такая таблица col ----- A,B col может быть строкой с запятой или массивом.У меня есть...

Согласно блогу , hdfs использует механизм аренды, чтобы избежать того, чтобы два клиента писали...

Программа чтения OrcFile имеет два параметра: путь к файлу и конфигурацию файловой системы,...

Поскольку мы знаем, что объяснение, сопровождаемое запросом в кусте, дает нам план объяснения для...

Я пытался создать искровую среду на CentOS6.8 на macOS с использованием VMware Fusion . Я уже...

Я настроил кластер Hadoop с 4 узлами с главным узлом и тремя узлами данных.Кажется, все работает...

У меня проблема с: running beyond physical memory limits. Current usage: 1.5 GB of 1.4 GB physical...

У меня есть задание MapReduce, которое обрабатывает 1,4 Тб данных.При этом я получаю сообщение об...

У нас есть экземпляр HDFS, который находится в автономном режиме (без HA).Объем данных составляет...

У меня есть программа, которая вставляет строку, подобную этой ('A','B'), в...

Я пытаюсь прочитать один из файлов, помещенных в HDFS, используя класс сканера, но я не могу это...

Мы получаем два разных файла за короткий промежуток времени от мейнфреймов. Мы не можем предсказать...

У меня есть 100 таблиц в базе данных.Я хочу импортировать только 5 таблиц.Я не могу / не использую...