Невозможно прочитать столбцы формата даты (тип int96) из схемы авро-паркета в Apache Beam - PullRequest
Новая
       30

Невозможно прочитать столбцы формата даты (тип int96) из схемы авро-паркета в Apache Beam

0 голосов
/ 24 апреля 2019

При чтении файла паркета, имеющего столбец дата , возникает следующее исключение.Я использую beam-sdks-java-io * 2.11.0 и паркет * -1.10 , пожалуйста, помогите мне за то же самое.

Заранее спасибо. 

Caused by: java.lang.IllegalArgumentException: INT96 not yet implemented.
    at org.apache.parquet.avro.AvroSchemaConverter$1.convertINT96(AvroSchemaConverter.java:279)
    at org.apache.parquet.avro.AvroSchemaConverter$1.convertINT96(AvroSchemaConverter.java:264)
    at org.apache.parquet.schema.PrimitiveType$PrimitiveTypeName$7.convert(PrimitiveType.java:297)
    at org.apache.parquet.avro.AvroSchemaConverter.convertField(AvroSchemaConverter.java:263)
    at org.apache.parquet.avro.AvroSchemaConverter.convertFields(AvroSchemaConverter.java:241)
    at org.apache.parquet.avro.AvroSchemaConverter.convert(AvroSchemaConverter.java:231)
    at org.apache.parquet.avro.AvroReadSupport.prepareForRead(AvroReadSupport.java:130)
    at org.apache.parquet.hadoop.InternalParquetRecordReader.initialize(InternalParquetRecordReader.java:183)
    at org.apache.parquet.hadoop.ParquetReader.initReader(ParquetReader.java:156)
    at org.apache.parquet.hadoop.ParquetReader.read(ParquetReader.java:135)
    at org.apache.beam.sdk.io.parquet.ParquetIO$ReadFiles$ReadFn.processElement(ParquetIO.java:221)
...