Я установил параметры сжатия в SparkConf следующим образом: sparkConf.set("spark.sql.parquet

Я перезаписываю существующий паркетный раздел apache spark 2.2 каждый раз, когда появляется запрос...

Мне нужно прочитать некоторые файлы 'paraquet' в R. Есть несколько решений, использующих sparklyr...

Я читаю фрейм данных из файла паркета, который имеет вложенные столбцы (struct). Как проверить...

У нас есть требование добавлять к существующему объекту S3, когда мы запускаем приложение spark...

Я пытался добавить код Spark в существующий файл паркета, но приложение не работает.Вместо этого...

Я пытаюсь оптимизировать как некоторые запросы Spark, так и схему Parquet, используя такие...

Я сейчас ломаю голову над этим. Я новичок в этих parquet файлах, и у меня много проблем с ним. Мне...

У меня проблема с объединением двух фреймов данных. Странная часть в том, что это сработало - но...

Я хочу заархивировать свои журналы в формате Parquet. Прежде чем писать таблицу, я хочу...

Я пытаюсь прочитать индекс ElasticSearch , который содержит миллионы документов, каждый из которых...

Я получаю ошибку OutOfMemory при попытке открыть большой файл паркета размером 96 МБ. Есть ли...

Я недавно начал использовать apache parquet cpp.Я собрал файл .so, следуя процедуре, и смог...

Я надеюсь, что кто-то может помочь мне с этой проблемой.В настоящее время я работаю над проектом...

Если я разделю набор данных, будет ли он в правильном порядке, когда я читаю его обратно? Например,...

Я читаю файл паркета и преобразую его в датафрейм. from fastparquet import ParquetFile pf =...

Я пытаюсь определить, какой оптимальный размер файла при разбиении данных Parquet на S3. AWS...

Я сталкиваюсь с этой ошибкой при попытке скопировать данные из Parquet в S3 в Redshift: S3 Query...

Я начал использовать node-parquet (https://www.npmjs.com/package/node-parquet) (источник:...

Афины таблицы "организация" считывают данные из паркетных файлов в s3.Мне нужно изменить имя...

Я работаю над конвейером ETL, чтобы преобразовать файлы JSON в формат Parquet (стоимость хранения)...

Я пытался установить пакет узла (https://www.npmjs.com/package/node-parquet) в CentOS и Ubuntu с...

Я пытаюсь преобразовать несколько CSV-файл в паркетный формат, используя блокнот jupyter.Тем не...

Предположим, что файл Parquet имеет> 2 столбца, и у меня есть фильтр на 2 из столбцов, таких как:...

Я хотел быстро преобразовать формат файла паркетного файла в TXT. Пробовал с parquet-tools cat...