Spark с SpringBoot выдает ошибку, связанную с log4j во время Spark-отправки - PullRequest
0 голосов
/ 08 июля 2019

Я использую Spark-Streaming в своем приложении SpringBoot. Я сталкиваюсь с ошибкой при выполнении искровой регистрации. Ниже приведены журналы, которые я получаю, когда запускаю команду spark-submit.

> 19/07/08 16:32:36 WARN NativeCodeLoader: Unable to load native-Hadoop library for your platform... using builtin-java classes where applicable
log4j: WARN No appenders could be found for logger (org.apache.spark.deploy.SparkSubmit$$anon$2).
log4j: WARN Please initialize the log4j system properly.
log4j: WARN See http://logging.apache.org/log4j/1.2/faq.html#noconfig for more info.

команда spark-submit -

spark-2.4.1-bin-hadoop2.7\bin>spark-submit --class XYZApplication--master local[2] --deploy-mode client \target\xyz_backend-0.0.1_backend-jar-with-dependencies.jar

Я проверил приведенную ниже ссылку и перепробовал все сценарии, но не повезло.

Пожалуйста, помогите.

...