Как лучше сгладить данные NDJson в Python - PullRequest
0 голосов
/ 10 июня 2018

У меня есть огромный файл (> 400 МБ) данных в формате NDJson, и я хотел бы преобразовать его в формат таблицы для дальнейшего анализа.

Я начал перебирать различные объекты вручную, но некоторые из них довольно глубоки и могут даже со временем меняться, поэтому я надеялся на более общий подход.

Я был уверен, что pandas lib предложит что-тоно не смог найти ничего, что помогло бы моему делу.Кроме того, некоторые другие библиотеки, которые я обнаружил, по-видимому, «не полностью» обеспечивают то, на что я надеялся (flatten_json).Все это кажется очень рано.

Возможно ли, что сейчас нет хорошего (быстрого и простого) решения этой проблемы?

Любая помощь приветствуется

...