Другая команда создает файл партера на S3 с помощью apache-spark, и они утверждают, что файл отсортирован по столбцу «дата». Как я могу это проверить?
Я установил parquet-tools, скачал файл с S3 и сохранил его как 'f1.parquet', затем использовал: parquet-tools meta f1.parquet Показывает схему, но я нене вижу ничего, что упоминает, что данные отсортированы в столбце «дата».