Я думаю, что общий ответ здесь заключается в том, что вы можете записывать произвольные данные и артефакты из вашего эксперимента на сервер отслеживания MLflow, используя mlflow_log_artifact()
или mlflow_set_tag()
, в зависимости от того, как вы хотите это сделать.Если есть API для получения данных из Glue, и вы можете получить их во время запуска MLflow, вы можете зарегистрировать их.Напишите CSV, сохраните файл .png на диск и запишите его или объявите переменную и получите доступ к ней, когда вы устанавливаете тег.
Это относится к Glue или любому другому API, от которого вы получаете ответ.Одним из ключевых преимуществ MLflow является то, что это такая общая структура, поэтому вы можете отслеживать, что важно для этого конкретного эксперимента.
Надеюсь, это поможет!