pyspark - Как объединить файлы oop без перераспределения - PullRequest
0 голосов
/ 17 февраля 2020

Мне нужно иметь возможность объединять файлы из одного раздела в файлы размера блока (по 128 МБ каждый).

Я хочу понять, как я могу получить доступ к указанным c файлам раздела / проверке для каждого файла, который является его разделом, так что я мог бы объединить файлы, вот так.

Передача / объединение, кажется, не является правильным вариантом, так как мне нужно сохранить структуру разделов как есть.

...