GCP Healthcare FHIR Проглатывание происходит слишком медленно

Question

Я пытаюсь получить 1 миллион файлов FHIR JSON (каждый размер файла в байтах) в FHIR Store набора данных Google Health. Потребуется так много времени, чтобы проглотить (больше часа). Есть ли способ оптимизировать скорость API здравоохранения.

Примечание: я хочу получить, де-идентифицировать и экспортировать в bigquery. поэтому весь процесс занимает более 3 часов времени.

Заранее спасибо

Answer 1

Некоторые советы по производительности для массового импорта FHIR в API Google Cloud Healthcare:

• Убедитесь, что входная корзина GCS находится в том же регионе, что и набор данных здравоохранения , Межрегиональный импорт будет медленнее.
• Проверьте квоту проекта. Соответствующая квота для массового импорта - «Вход хранилища FHIR в байтах в минуту». Вы можете запросить увеличение квоты, если это станет ограничивающим фактором.
• Производительность может варьироваться в зависимости от общей нагрузки в регионе, который вы используете. us-central1 - очень популярный регион, потому что на него ссылается кодовая метка; Вы могли бы достичь более высокой пропускной способности в других местах (см. https://cloud.google.com/healthcare/docs/concepts/regions для доступных регионов).