Более быстрая реализация для преобразования json-файла переменной длины в pandas dataframe - PullRequest
0 голосов
/ 17 октября 2018

Я пытаюсь импортировать объект json в python.Объект json преобразуется в словарь.Поскольку словарь имеет переменную длину, я не могу использовать операцию pandas.DataFrame.from_dict () для такого словаря.

Основываясь на проблеме, уже решенной на этом форуме, я попытался использовать:

df=pd.concat({k: pd.DataFrame(v) for k, v in detection.items()})

Однако, когда размер словаря увеличивается до 40000 или 60000, эта операциятребуется время, чтобы преобразовать словарь в фрейм данных панд.Мои эксперименты со словарем размером 11000 занимают 10 секунд, а с размером 37000 - 30 секунд.

Я хотел бы спросить, есть ли более быстрая реализация таких процедур, которые можно использовать для больших словарей .

Спасибо.

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...