Мои требования:
Мне нужно вытащить полные данные, т.е. все объекты / поля из Salesforce, в мое Amazon S3 Bucket для дальнейшего анализа данных по историческим данным.
В настоящее время я выполняю это действие для некоторых объектов Salesforce, таких как Opportunity, Leads, Accounts, Contacts, используя AWS Glue, где я написал несколько заданий Glue на языке программирования SCALA для подключения к Salesforce, извлечения данных в Spark Dataframes и их дампирования. в корзине S3.
Теперь я хочу сделать это для всех объектов Salesforce наилучшим образом, чтобы сократить расходы на AWS.
Пожалуйста, предложите мне любой лучший стандартный подход для выполнения этой задачи.