Преимущества использования HDInsights SPARK над кластером баз данных Azure - PullRequest
0 голосов
/ 24 января 2019

Я просмотрел несколько документов, но не смог получить список преимуществ использования искрового кластера HDInsigths по сравнению с кластером Azure Databricks.Есть ли ключевые различия между этими двумя?Мне нужен в основном список функций, поддерживаемых HDInsights и не поддерживаемых блоками данных Azure.

1 Ответ

0 голосов
/ 31 января 2019

Позвольте мне провести вас через визуальное путешествие и показать несколько скриншотов. Я приложил несколько скриншотов для Azure Spark и Azure Databricks. Azure spark - это пакет HDInsight (Hortomwork HDP) на Hadoop. Когда вы запускаете сервисы, блоки данных выглядят совсем иначе.

Вы должны выбрать количество узлов и конфигурацию, а остальные службы будут настроены службами Azure.

Если вы посмотрите на экземпляр HDInsight Spark, он будет иметь следующие функции. Смотрите эти 2 скриншота HDInsight Instance for spark && and available features

  1. Apache Ranger
  2. Корпоративный пакет безопасности
  3. HDInsight IO Cache
  4. Доступ к защищенной оболочке (SSH)
  5. HDInsight-приложения
  6. Пользовательская виртуальная сеть
  7. Custom Hive metastore
  8. Custom Oozie metastore
  9. Доступ к хранилищу озера данных Gen1

С другой стороны, Azure Spark является полной абстракцией и предоставляет следующую функцию без какой-либо настройки. Выберите ресурс Data Bricks и введите основную информацию, экземпляр запустится refer deployment status. Ваш экземпляр запущен и работает see here.. Ваша платформа готова к использованию, see here. Все ваши ноутбуки, учебники и т. Д. Доступны и готовы к использованию. Вам не нужно думать ни о чем другом. Ваши конечные ресурсы выглядят так, как только создается экземпляр блока данных. here

Цены на данные кирпичи очень разные, и вы можете сослаться цены здесь Ссылки на базы данных для Цены здесь

...