Есть ли способ изменить расположение вывода журнала драйвера для задания dataproc?

Question

Я хотел бы получить программный доступ к журналам драйверов после завершения работы и удаления кластера. Я мог бы сохранить задание и идентификатор кластера где-нибудь, чтобы найти его позже, но подумал, что будет проще просто попросить dataproc хранить журналы в известном месте. Есть ли какой-нибудь способ переопределить расположение выхода драйвера для задания на искру?

Answer 1

В настоящее время это не поддерживается, но вы можете подать запрос функции на общедоступный Dataproc средство отслеживания проблем .

Тем временем, хотя вы также можете рассмотреть возможность указанияcustom --bucket во время создания кластера;выходные данные драйвера и другие конфигурационные файлы кластера будут идти в том контейнере, который вы укажете в качестве кластера конфигурации кластера, а не в хранилище по умолчанию, созданном в dataproc.