Просмотр с данными из многих баз данных

Question

Я строю сайт в Джанго, где перечислены товары многих поставщиков. Каждый поставщик имеет свою большую базу данных и часто вносит изменения. Я должен быть в курсе всех изменений не более чем за 60 минут. Есть около 10 миллионов предметов для отображения. Как эффективно реализовать все это?

Answer 1

Мне кажется, что ваше приложение имеет довольно уродливую архитектуру.Попробуйте его реорганизовать, иначе у вас будут проблемы.

В любом случае, вы можете попытаться кэшировать данные своих поставщиков в свою собственную базу данных (одну) и сэкономить некоторые ресурсы.