Довольно низким, но эффективным способом было бы: экспортировать данные Azure как CSV с помощью pg_dump,
скопируйте его в корзину AWS S3 (довольно просто с пакетом Python awscli) и загрузите из S3 в RDS Postgres .
Было бы замечательно, если бы файлы можно было переносить напрямую из хранилища больших двоичных объектов в s3, но я не думаю, что Azure Postgres все равно поддерживает непосредственный сброс в большие двоичные объекты.