Вопросы с тегом pyspark-SQL - PullRequest

Вопросы с тегом pyspark-SQL

0 голосов
0 ответов

Из того, что я вижу, rdd.toDF() вводит PythonRDD, что становится ExistingRDD в плане запроса. df1 =...

colinfang / 24 апреля 2019
1 голос
1 ответ

У меня есть набор данных о погоде, и я пытаюсь запросить его, чтобы получить средние минимумы и...

iadducchio3 / 24 апреля 2019
2 голосов
1 ответ

Я хотел бы просмотреть каждую строку в фрейме данных pyspark и изменить значение столбца на основе...

bmarks2010 / 24 апреля 2019
0 голосов
0 ответов

Я думал, что это должно быть относительно легко сделать, но я получаю сообщение об ошибке, когда я...

MrL / 24 апреля 2019
0 голосов
0 ответов

Я хочу загрузить XML-файлы из определенной папки с помощью Pyspark.Но я не хочу использовать пакет...

Md Sirajus Salayhin / 24 апреля 2019
0 голосов
0 ответов

Я изучаю sql, используя pyspark-sql.Я просто хотел проверить, могут ли в некоторых условиях две...

Ali Farshidi / 24 апреля 2019
1 голос
1 ответ
0 голосов
0 ответов

В настоящее время я записываю фрейм данных в csv , используя write.csv. df.withColumn("x"...

priya / 23 апреля 2019
0 голосов
1 ответ

Я хотел бы создать таблицу календаря, используя этот запрос (он работает в обычном SQL) SELECT...

Elbert / 23 апреля 2019
0 голосов
1 ответ

При использовании предложения "and" в фильтре в Spark Dataframe возвращается Spark.SQL.Column...

rapunzel / 23 апреля 2019
3 голосов
3 ответов
0 голосов
1 ответ

Я пытаюсь выполнить группирование для определенного столбца в кадре данных на основе данных,...

Vineel / 22 апреля 2019
0 голосов
1 ответ

Рассмотрим пример кадра данных: df = +-------+-----+ | tech|state| +-------+-----+ | 70|wa | |...

TJE / 21 апреля 2019
0 голосов
0 ответов

Я хочу добавить новый столбец с некоторым выражением, как здесь определено (https://www.mien

Aviral Srivastava / 21 апреля 2019
1 голос
0 ответов

Я пытаюсь закодировать, чтобы убрать значения из данных столбца в SQL Это то, что необработанные...

Pete / 21 апреля 2019
0 голосов
0 ответов

Я пытаюсь использовать методы обработки текста keras для текстового столбца в искровом фрейме...

Folarin / 19 апреля 2019
0 голосов
1 ответ
0 голосов
0 ответов

Я вижу похожие вопросы с Java / Scala, но как импортировать файлы, сжатые в формате zip / gzip /...

Luke / 18 апреля 2019
0 голосов
0 ответов

Я читаю довольно много данных (2.3TB) в фрейм данных искры. Все файлы CSV подготовлены для модели...

Harry Leboeuf / 18 апреля 2019
1 голос
1 ответ

Я новичок в PySpark - и у меня проблема. Я создал код, который читает файл паркета, запрашивает его...

Bramat / 18 апреля 2019
0 голосов
1 ответ

Я использую Spark SQL в скрипте AWS Glue для преобразования некоторых данных в S3.Вот логика...

moron / 17 апреля 2019
0 голосов
1 ответ

имеют фрейм данных (столбцы с до e имеют до 15 вариантов) cola, colb, colc_1, cold_1, cole_1,...

babz / 17 апреля 2019
0 голосов
1 ответ

При замене значений столбца в df методом замены, как мы можем использовать словарь, чтобы сделать...

mathers25 / 16 апреля 2019
0 голосов
1 ответ

Мне нужно было запустить функцию в Python, которая проверяет день и месяц сегодня вместе с другим...

Ryan Aga / 15 апреля 2019
0 голосов
1 ответ

У меня есть фрейм данных с 10609 строками, и я хочу преобразовать 100 строк за раз в JSON и...

Sridhar Lanka / 15 апреля 2019
Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...