В моем AWS Glue Workflow (определенном с помощью CloudFormation) у меня есть несколько заданий (pythonshell), которые имеют повторяющийся лог c для создания некоторых параметров, таких как одна и та же строка соединения с БД и c. Также есть повторяющиеся логи c через Boto3, такие как:
import boto3
sm_client = boto3.client(service_name='secretsmanager', region_name=region_name)
db_password = sm_client.get_secret_value(SecretId="MY_DB_PASSWORD")["SecretString"]
для извлечения относительного пароля БД.
Как уже говорилось, этот вид логи c повторяется через несколько рабочих мест. Есть ли какой-либо сеанс сортировки или у вас есть идея о хранении такого рода информации в нескольких заданиях для одного и того же рабочего процесса?