У меня есть файл ORC на локальном компьютере, и мне нужен какой-либо разумный формат (например, CSV...

Я новичок в Big Data, пытаясь понять различные форматы файлов с точки зрения лучшего выполнения...

Проанализировав сам пример файла ORC, я узнал, что формат файла ORC не хранит никакой информации о...

Я хочу записать данные ORC во внешнюю таблицу Hive из фрейма данных Spark.Когда я сохраняю фрейм...

Я написал простое приложение на Java maven, которое зависит от spark-hive_2.11 для преобразования...

Скажем, у меня есть запрос Hive, например: CREATE TABLE student (key string, name string, course...

Когда вы создаете таблицу ORC в кусте, вы меняете тип файла на orc.Это означает, что вы не можете...

У меня есть скрипт куста, который считывает данные json и вставляет (используя INSERT OVERWRITE) в...

Я просмотрел множество стековых ссылок и других блогов, и от всех них есть разные ответы.Все ответы...

У меня есть схема авро: { "namespace":"nifi",...

Я использую песочницу maprR для тестирования различных настроек в кустах и ​​MaprF.Я получил в...

Я создал искровой фрейм данных, считывающий csv из местоположения hdfs. emp_df = spark.read

В настоящее время я сохраняю фрейм данных в файлы orc в Amazon S3, используя искру, например: df

Я вывожу файл orc из моей задачи hadoop. Моя схема содержит вложенные структуры и несколько списков...

У меня есть три разных файла orc в трех разных папках, я хочу прочитать их все в один фрейм данных...

Я реализую процесс mapreduce, в котором выполняется чтение, обработка и запись в файл orc. Проблема...

У меня есть файл ORC со следующей структурой: Type: struct<event_ts:timestamp...

У меня есть таблица улья, которая указывает путь s3 (s3: /// table / data /), который содержит...

Можно ли считать файл ORC похожим на файл CSV с заголовками столбцов и метками строк, содержащими...

У меня проблемы с настройкой размера полосы, индекса шага и индекса для файла orc с помощью PySpark

Я попробовал .options ("orc.stripe.size", "25634344") на уровне модуля записи данных, но не дал...

У меня есть таблица кустов с файлами в формате паркета. Одним из типов данных столбца является...

У меня есть куча CSV-файлов в S3, которые я пытаюсь преобразовать в ORC, используя задание ETL в...

У меня есть таблица, хранящаяся в формате ORC с фильтром Блума, определенным для 1 столбца. Можно...

При чтении в файле ORC в Spark, если вы укажете столбец раздела в пути, этот столбец не будет...