пытается выполнить s3-sqs Qubole Connector для структурированной потоковой передачи

Question

Я пытаюсь следовать, https://github.com/qubole/s3-sqs-connector и пытаюсь загрузить соединитель, но кажется, что соединитель недоступен в maven, и при генерации buiold вручную классы sqs не загружаются. Может ли кто-нибудь1 помочь мне в этом.

Спасибо, Дипе sh

Answer 1

Обновление:

Разъем S3-SQS теперь доступен в центральном maven. https://mvnrepository.com/artifact/com.qubole/spark-sql-streaming-sqs

Вы должны быть в состоянии использовать его сейчас. Обратитесь к нам, если у вас возникнут какие-либо проблемы.

---

К сожалению, регистрация s3-sqs-соединителя в пакетах spark по-прежнему не завершена. Мы постараемся выпустить пакет прямо в Maven Central как можно скорее, но это займет как минимум несколько дней.

В то же время, вы можете клонировать хранилище и самостоятельно собрать банку, если потребуется.