Нужны предложения для быстрого и эффективного анализа файлов json списка цен AWS

Question

Я пытаюсь проанализировать JSON-файлы прайс-листа для некоторых сервисов aws.После разбора я случайно выбираю ключ из списка ключей, чтобы получить данные.В настоящее время мой код загружает файлы json по одному, что занимает много времени.Я хотел бы получить некоторые предложения о том, как я могу ускорить этот процесс.

Answer 1

Закончено создание базы данных на сервере redis.

Answer 2

Если ваш JSON в формате JSONL (т.е. один объект JSON на строку, без многострочных объектов), вы можете загрузить файлы в S3 и использовать AWS Athena для выполнения запросов SQL к данным, полям агрегирования и т. д. Вы также можете подключиться к Athena с помощью JDBC для программного доступа.