Spark Core - встроить в другое приложение - PullRequest
0 голосов
/ 10 декабря 2018

У меня есть сценарий использования для обработки простых заданий, подобных ETL.Объем данных очень меньше (менее нескольких ГБ) и может легко поместиться в память моего запущенного Java-приложения.Я хотел бы воспользоваться API набора данных Spark, но мне не нужны никакие настройки искры (Standalone / Cluster).Могу ли я встроить искру в существующее приложение Java и все еще использовать

Я слышал, что режим локальной искры предназначен только для тестирования.Для небольших наборов данных, таких как, это все еще можно использовать в производстве?Пожалуйста, совет, если какие-либо недостатки.

С уважением, Редди

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...