Класс пользователя сгенерировал исключение: java.lang.Exception: java.io.IOException: Нет файловой системы для схемы: wasbs - PullRequest
Новая
       33

Класс пользователя сгенерировал исключение: java.lang.Exception: java.io.IOException: Нет файловой системы для схемы: wasbs

0 голосов
/ 19 сентября 2018

Я работаю над проектом Spark, который берет данные из kafka и сохраняет их в лазурном блобе. refrence Я добавил зависимости 

    <dependency>
        <groupId>org.apache.hadoop</groupId>
        <artifactId>hadoop-azure</artifactId>
        <version>2.7.0</version>
    </dependency>
    <dependency>
        <groupId>com.microsoft.azure</groupId>
        <artifactId>azure-storage</artifactId>
        <version>2.0.0</version>
    </dependency>

Я получаю сообщение об ошибке при отправке задания на пряжу

Исключение выброса класса пользователя: java.lang.Exception:java.io.IOException: Нет файловой системы для схемы: wasbs

Но когда я отправляю задание на локальном компьютере, оно работает нормально.

Я добавил jar в свою команду spark-submit-

 --jars azure-storage-2.0.0.jar,hadoop-azure-2.7.0.jar

Но все та же проблема.

...