У меня есть папка с 590,035 json файлами. Каждый файл - это документ, который необходимо проиндексировать. Если я индексирую каждый документ, используя python, то это занимает более 30 часов Как быстро проиндексировать эти документы?
Примечание - я видел массовый API, но для этого требуется объединить все файлы в один, что занимает примерно столько же времени, как указано выше.
Подскажите пожалуйста, как улучшить скорость. Спасибо.