Как определить, какие пути были десериализованы заданием, запущенным из YARN (например, Spark или Hive) - PullRequest
1 голос
/ 07 октября 2019

Я хочу знать, какие пути в HDFS десериализуются при каждом задании, выполняемом в моем кластере.

Десериализуется ли список путей для каждой работы где-нибудь в стандартных журналах Spark / Hive? Они на уровне ApplicationMaster, уровне задачи или уровне попытки задачи?

...