Вопросы с тегом apache--spark

0 голосов

2 ответов

Как превратить кадр данных из двух столбцов, где каждая строка представляет идентификатор пары друзей, в данные с идентификатором и всеми их друзьями в одной строке?

Xiaoyu Zhai / 13 февраля 2020

0 голосов

0 ответов

Как определить размер кластера Spark, чтобы применить алгоритм MLib к набору данных объемом 1 ТБ?

Jovan MSFT / 13 февраля 2020

0 голосов

1 ответ

Как я могу рассчитать по модулю в Pyspark?

Miguel A. Friginal / 12 февраля 2020

0 голосов

0 ответов

отладить проект maven с Java и Scala и Spark от IntelliJ или от AirFlow / DAG и блоков данных / notbook?

user3448011 / 12 февраля 2020

2 голосов

1 ответ

Создайте столбец Df с диапазоном чисел, не используя UDF

NetRocks / 12 февраля 2020

0 голосов

1 ответ

False / True Константа столбца

nsvir / 12 февраля 2020

0 голосов

1 ответ

OpenCV читает изображения из pyspark и передает их модели Keras

user554481 / 12 февраля 2020

0 голосов

1 ответ

как я могу отбросить дубликаты на ["x", "y"] без перетаскивания искрового фрейма данных, уже разделенного на "x"

itaifrenkel / 12 февраля 2020

0 голосов

1 ответ

Как избежать проблем с небольшими файлами при записи в hdfs & s3 от spark- sql -streaming

Shyam / 12 февраля 2020

0 голосов

0 ответов

Как записать одно значение в конце каждой потоковой партии в спарк

Knight71 / 12 февраля 2020

0 голосов

0 ответов

Как добавить пакеты к существующему образу через docker -compose?

Suraj Patil / 12 февраля 2020

0 голосов

1 ответ

Сравните два набора данных в pyspark

daddou06 / 12 февраля 2020

0 голосов

0 ответов

Очередь YARN превышает максимальный предел для планировщика Capacity

Snigdhajyoti / 12 февраля 2020

0 голосов

0 ответов

Ярмарка планирования Spark Job, но вместо нее запускается fifo

irbin / 12 февраля 2020

0 голосов

0 ответов

Действия по включению и просмотру журналов аудита искрового улья

Subhash Reddy / 12 февраля 2020

0 голосов

1 ответ

Извлечение структурных полей в Spark scala

Etisha / 12 февраля 2020

1 голос

1 ответ

«NotSerializableException» в scala функции карты

tejas / 12 февраля 2020

1 голос

1 ответ

Получение: Ошибка импорта модулей Spark: нет модуля с именем «pyspark.streaming.kafka»

Reeja / 12 февраля 2020

0 голосов

1 ответ

Как извлечь строковые значения из RDD Array [Array [String]] в spark-shell?

GUMMADI VIJAYA KUMAR / 12 февраля 2020

0 голосов

1 ответ

Apache Spark ---- как spark читает большие разделы из источника, когда не хватает памяти

anush / 12 февраля 2020

1 голос

1 ответ

Ошибка при подключении к postgresql с pyspark в оболочке - org. postgresql .Driver Class not found исключение

ravi kumbar / 12 февраля 2020

0 голосов

2 ответов

Scala: lowerByKey для нахождения максимума в кортеже

zhihao_li / 12 февраля 2020

1 голос

1 ответ

Кафка createDirectStream с использованием PySpark

Soumya / 12 февраля 2020

2 голосов

2 ответов

Pypark заменить значения столбца

Spark Scala Developer / 12 февраля 2020

1 голос

1 ответ

java .lang.NumberFormatException: для входной строки: «inf» при чтении из снежинки с помощью Spark

bachr / 12 февраля 2020