Как я могу создать фрейм данных из сообщений в кодировке protobuf? - PullRequest
0 голосов
/ 22 января 2019

Я пытаюсь записать кучу протобуф-закодированных сообщений в виде паркетного файла на диск, используя pyspark.Я сгенерировал pb2 файлы для схемы protbuf.Я могу разобрать сообщение и создать из него rdd.Но не в состоянии найти способ превратить эти поля сообщений в столбцы, чтобы можно было создать искровой фрейм данных, который в конечном итоге можно записать на диск.

...