Я пишу сценарий оболочки Spark и по какой-то причине мне сказали не предоставлять код в виде jar-файла, а не просто сценарий оболочки scala-оболочки spark.
Мое приложение будет сосредоточено на чтениипотоки кафки искры.Но так как поток Kafka не является частью искры, мне нужно будет предоставить jar зависимости потока kafka при отправке в spark-submit.
Я написал сценарий Spark в IntellijIDEA IDE.У меня также есть некоторые другие зависимости, которые видны в разделе «Внешние библиотеки» среды IDE.
Теперь, как я могу создать одну банку зависимостей из «внешних библиотек», чтобы я мог предоставить ее в то время какотправляете мой искровой скрипт?