Я работаю над проектом прогнозирования ссылок в Spark, используя Scala. Моя цель состоит в том,...
Могу ли я безопасно наследовать как черту, так и базовый класс, которые используют один и тот же...
У меня около 700 ГБ данных, которые я читаю из HDFS при каждом запуске задания Spark. Моя работа...
У меня есть оригинальный фрейм данных с несколькими столбцами, чтобы упростить их: product_id,...
В данный момент я работаю над приложением scala, пользователь может заполнить форму, после отправки...
У меня вопрос ниже файла json, где он содержит данные типа структуры для column3. Я могу извлечь...
Написал следующий UDF с целью заставить его обрабатывать случай, когда один параметр не определен....
У меня есть набор данных, который я хочу записать, отсортированный в файлы паркета, чтобы...
Здесь я хочу отсортировать данные по каждому идентификатору на основе даты. В этих отсортированных...
У меня есть данный кусок кода. Я запускаю это на Spark 2.3.1, используя Zeppelin 0.8.0 и org.apache
У меня есть два класса scala как часть моей работы на spark-sql, то есть Driver.scala и...
У меня есть библиотека, которая добавляется как зависимость в maven и в проекте sbt соответственно....
Существует ли конкретная зависимость sbt, необходимая для следующих bean-компонентов, записанных в...
Пожалуйста, посмотрите на прикрепленный скриншот. Я пытаюсь улучшить производительность своей...
Я пытаюсь отфильтровать DataFrame, сравнивая два столбца даты, используя Scala и Spark. На основе...
Здравствуйте. Я хочу преобразовать эти типы строк в дату, используя API-интерфейс LocalDateTime...
Я использую селен в scala для автоматической загрузки некоторых файлов. Мне удалось зайти на сайт,...
Я новичок в программировании Scala. У меня есть сценарий использования для извлечения значения...
У меня есть библиотека Scala, которая содержит некоторые служебные коды и UDF для API Scala Spark....
F # и Scala действуют как гибридный язык, который часто используется для соединения слов...
У меня есть удаленный сервер и среда Hadoop, прошедшая проверку подлинности Kerberos. Я хочу...
В настоящее время я работаю с несколькими многоэтапными формами в моем приложении Scala Play,...
У меня очень большая структура, которая создается во время выполнения задания, которая имеет...
Я видел вопрос, похожий на мой в базе данных, но он нигде не связан с моими сомнениями в коде. Я...
Я реализую метод buildScan API источника данных Spark v1. override def buildScan(requiredColumns:...