Мне интересно, есть ли какой-нибудь способ для spark-submit временно изменить конфигурацию задания пряжи?
Вопрос в том, что наш сервер истории Spark over yarn дает доступ только администраторам, что не удобно дляПользователь, чтобы получить журнал своей работы.Я узнал, что "mapreduce.job.acl-view-job" в mapreduce-default.xml может изменить список ACL конкретной работы.Поскольку я использую spark-submit для запуска задания, а "--conf" зарезервирован для самой Spark, но как я могу установить конфигурацию пряжи из командной строки вместе с приложением?