Вопросы с тегом apache--spark

0 голосов

0 ответов

Данные таблицы Hive становятся пустыми в PySpark при доступе через URI метасторского хранилища Hive

Rajat Bubna / 23 марта 2020

0 голосов

3 ответов

Как сгруппировать указанные c SQL столбцы и получить строки с наибольшим количеством этих столбцов?

codeshark / 23 марта 2020

0 голосов

1 ответ

Как создать pyspark udf, вызывая функцию класса из другой функции класса в том же файле?

Manuel Carrero / 22 марта 2020

0 голосов

1 ответ

Ошибка нехватки памяти при запуске искры отправки

user2492356 / 22 марта 2020

0 голосов

1 ответ

как игнорировать журнал импортированных библиотек при использовании log4j в приложениях spark

user2352554 / 22 марта 2020

0 голосов

0 ответов

Amazon S3 Читать несколько файлов .gz с заголовком

cnrdbk / 22 марта 2020

0 голосов

1 ответ

Настройте Hive metastore в моей локальной оболочке Spark

Thulasitharan / 22 марта 2020

0 голосов

1 ответ

Как добавить двойные кавычки для всех ненулевых значений, а также не для заголовков в spark Java

Rochit Aggarwal / 22 марта 2020

0 голосов

1 ответ

Ошибка при соединении между pyspark и Elasticsearch

cybronele / 22 марта 2020

0 голосов

0 ответов

Java Spark постоянных данных на S3. Ошибка не выдана, но в консоли S3 не создано ни одного файла

Laodao / 22 марта 2020

0 голосов

0 ответов

NullPointerException при использовании утилит Databricks в Azure Databricks в пользовательском банке

Bino / 22 марта 2020

0 голосов

0 ответов

Исключение в потоке "main" java .lang.NoSuchMethodError: io.fabric8.kubernetes.api.model.AuthInfo.getExe c () Lio / fabric8 / kubernetes / api / model / ExecConfig;

Raghav Kapoor / 22 марта 2020

0 голосов

0 ответов

collectAsMap не сохраняет порядок при запуске в этой последовательности map / sortByKey / collectAsMap в spark?

Bob / 21 марта 2020

1 голос

2 ответов

NoClassDefFoundError: org / apache / spark / sql / SparkSession $ при локальном запуске исходного кода искры

Manu Jose / 21 марта 2020

0 голосов

1 ответ

Чтение данных с сервера sql и передача моего пароля с помощью специального символа в PySpark

Rahul / 21 марта 2020

1 голос

2 ответов

Scala / Spark - подсчет количества строк в кадре данных, в котором поле соответствует регулярному выражению

Ferex / 21 марта 2020

0 голосов

0 ответов

Искра scala ошибка - java .lang.ClassCastException: org. apache .spark.util.SerializableConfiguration не может быть приведена к [B

R_abcdefg / 21 марта 2020

0 голосов

1 ответ

Не удается прочитать из GreenPlum с помощью Spark Connector

Jithen / 21 марта 2020

0 голосов

0 ответов

Чтение данных из MinIO с помощью pyspark

papi / 21 марта 2020

0 голосов

0 ответов

Spark: разделение разнородных данных по схеме Dynami c

chuwy / 21 марта 2020

0 голосов

2 ответов

Как сделать общий заказ в Apache Spark, не встречая OOM?

Xintong Bian / 21 марта 2020

0 голосов

1 ответ

Исключительная ситуация sparkSession в потоке "main" java .lang.NoClassDefFoundError: com / google / common / collect / Maps

Yogendra / 21 марта 2020

2 голосов

2 ответов

Есть ли способ использовать PySpark с oop 2.8+?

Axel Borja / 21 марта 2020

0 голосов

1 ответ

Создать таблицу внешнего куста с помощью pyspark

Rahul sahu / 21 марта 2020

2 голосов

1 ответ

PySpark: объединить столбец данных кадра на основе array_contains

mzhenirovskyy / 21 марта 2020