Вопросы с тегом апаш-искровой SQL - PullRequest

Вопросы с тегом апаш-искровой SQL

0 голосов
1 ответ

Я использую приложение spark в конфигурации ниже: 1 мастер, 2 рабочих узла. Каждый работник имеет...

Raj / 27 августа 2018
0 голосов
1 ответ

У меня есть искровой DataFrame, импортированный из файла CSV. После применения некоторых...

RaspyVotan / 27 августа 2018
0 голосов
1 ответ

Я пытаюсь вычислить AUC (область под ROC), сгруппированную по ключевому полю, используя API Scala,...

nick_liu / 27 августа 2018
0 голосов
1 ответ

В базе данных Hive есть несколько таблиц, я хочу получить доступ к одной из них с помощью SparkSql...

Yang Sun / 27 августа 2018
0 голосов
0 ответов

Мне может показаться наивным задавать этот вопрос, но это проблема, с которой я недавно столкнулся...

Dasarathy D R / 27 августа 2018
0 голосов
3 ответов

Попытка выдвинуть определенную строку в кадре данных Spark в конец кадра данных.Это то, что я...

Dasarathy D R / 27 августа 2018
0 голосов
2 ответов

У меня есть Spark DataFrame с идентификатором и набором числовых столбцов, и для каждого столбца,...

user79913 / 27 августа 2018
0 голосов
0 ответов

В настоящее время я рассматриваю возможность использования Apache Spark для расчета некоторых...

TJVR / 26 августа 2018
0 голосов
0 ответов

Ниже приведено содержимое файла spark-defaults.conf.template: spark.master spark://10.10.51.93:7077...

Sriram Raghav / 26 августа 2018
0 голосов
1 ответ

У меня есть текстовый файл в HDFS, который содержит около 10 миллионов записей. Я пытаюсь прочитать...

Sudharnath / 25 августа 2018
0 голосов
2 ответов

Я хотел бы понять, как лучше всего выполнить агрегацию в Spark в этом сценарии: import sqlContext

Giorgio / 25 августа 2018
0 голосов
1 ответ

У меня есть датафрейм, импортированный из CSV с двумя столбцами (среди прочих): дата и время.Date -...

Raiden616 / 25 августа 2018
0 голосов
0 ответов

Я загружаю некоторые таблицы ORC из S3, но я полагаю, что я сталкиваюсь с некоторыми проблемами с...

kz3r / 24 августа 2018
0 голосов
1 ответ

У меня есть два кадра данных, DF1 и DF2, DF1 является ведущим, а DF2 является дельтой. Данные из...

navin / 24 августа 2018
0 голосов
1 ответ

Мне нужно вставить строку в таблицу SQL из Spark, запущенного в Azure Databricks, и узнать, есть ли...

user3241068 / 24 августа 2018
0 голосов
1 ответ

В Windows Spark 2.3.1 я пытаюсь объединить два кадра данных.Хотя оба имеют одну и ту же схему, я...

Erkan Şirin / 24 августа 2018
0 голосов
2 ответов

Я хочу запустить пользовательскую функцию для столбца данных. Столбец содержит длинную строку,...

Moca / 24 августа 2018
0 голосов
2 ответов

Можно ли как-нибудь оценить выражение Column, если я использую только Literal (без столбцов данных)

Kaushal / 06 июля 2018
0 голосов
1 ответ

Я использую Spark 1.6 и выполняю внутреннее объединение на двух кадрах данных следующим образом:...

Naveen Yadav / 06 июля 2018
0 голосов
1 ответ

В приложении Spark (Spark 2.1) я пытаюсь отправить класс case в качестве входного параметра функции...

Ste / 06 июля 2018
0 голосов
2 ответов

Я использую API структурированной потоковой передачи Spark 2.3.1. Можно ли ранжировать значения в...

user1384205 / 06 июля 2018
0 голосов
2 ответов

Как я могу получить доступ к выражению катализатора (не обычному UDF) в API Spark SQL scala DSL?...

Georg Heiler / 05 июля 2018
0 голосов
0 ответов

У меня есть вложенный файл JSON, который я загрузил в набор данных. например:...

sharon67 / 05 июля 2018
0 голосов
1 ответ

Я не был уверен, что озаглавить этот вопрос - рад за предложенное лучшее резюме Я бьюсь головой,...

Renée / 05 июля 2018
Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...