В настоящее время у меня работает спарк 2.x с пряжей. AFAIK, spark 2.x использует log4j 1.x в качестве механизма ведения журналов, поэтому вот мой вопрос: могу ли я использовать какую-то другую среду ведения журналов (отличную от log4j 1.x) и при этом сохранять журналы в hdfs, откуда пряжа будет их агрегировать?
Заранее спасибо.