У меня есть следующий код, который я хотел бы знать, почему переменная number оценивается дважды:...
import org.apache.spark.sql.{DataFrame, Column, SparkSession} object addColumn { def main(args:...
Я пытаюсь запустить пример приложения локально, используя: Scala (2.11), Spark (2.3.0) с...
Мне нужны вероятности, сгенерированные из XGboost / scala, извлеченные из моего фрейма предсказаний
Я определил регулярное выражение для журнала доступа Apache, как показано ниже: val...
Во-первых, я совершенно новичок в scala и spark, хотя немного famailiar с pyspark.Я работаю с...
Я хочу проанализировать строку JSON, используя Circa.Вы можете найти пример ввода JSON ниже. Это...
Я использую данные JSON из потока AWS Kinesis, но я получаю следующую ошибку при попытке...
Скажем, у меня есть какая-то функция, подобная этой: def doSomeCode(code: => Unit): Unit = {...
Я пытаюсь проанализировать столбец даты, который в настоящее время набирает строку.Это в формате...
У меня есть класс, который инициализируется целым числом и множеством.Я хочу создать...
Я пытаюсь прочитать большие CSV-файлы, в которых есть отдельный файл, содержащий заголовки для...
У меня есть структура, подобная следующей в формате orc / parquet. { "Register": {...
Я читаю блоб файла excel из базы данных.Каждый файл содержит только один лист.Используя Apache poi,...
Я пытаюсь понять, почему перечисление scala не выбирает значения из других типов перечисления,...
Файл, сгенерированный из API, содержит данные, подобные приведенным ниже col1,col2,col3 503004...
У меня есть DataFrame, и в нем есть столбец с именем Events.Итак, что я хочу сделать, это собрать...
Я делал конструктор с несколькими возможными аргументами, когда понял, что моя среда IDE указывает...
Я использую Scala 2.12.7 и Spark 2.4.3, у меня есть алгоритм для вычисления kNN с использованием...
Я сейчас практикуюсь на Spark, используя язык Scala.Я использую файл данных с несколькими...
У меня есть текстовый файл, который похож на ниже 20190920 123456789,6325,NN5555,123,4635,890,C,9...
У меня есть следующая таблица: case class Project(id: Int, name: String, locked: Boolean)...
Я получаю файл от API, который имеет закодированное (не ascii) символьное значение в 3 столбцах
Я работаю над проектом в Spark Scala. Могу ли я получить статистику таблицы таблицы Hive в...
У меня есть 100s файла журнала, которые разделены alternation '|', похоже, это примерно с...