Использование структурированной потоковой передачи Spark 2.1.1 - это способ изменить уровень журнала задания спарк (используя log4j) во время выполнения без перезапуска задания.