Режим кластера реестра схемы Hortonworks

Question

Я использую реестр схем Hortonworks с NIFI, и все работает нормально. Я установил реестр схем Hortonworks на одном узле, и я боюсь, что эта машина выйдет из строя, что произойдет с моими потоками NIFI. В архитектуре реестра схем Hortonworks я видел, что мы можем использовать хранилища mysql, PostgreSql и In-Memory для хранения схемы. AFAIK ни один из них не является распределенной системой. Есть ли способ добиться кластерного режима для высокой доступности?

Answer 1

Конечно, вы можете выполнять активно-активную или активно-пассивную репликацию для MySQL и Postgres, но это вам остается реализовать, поскольку Hortonworks, вероятно, направит вас к соответствующей документации по каждому инструменту, и это является причиной почему документация по этим инструментам сама по себе не ведет вас к этим проектным решениям, так как вы должны знать о недостатках, связанных с SPoF

Реестр Schema сам по себе является просто веб-приложением, поэтому вы можете поместить его под свой любимый обратный прокси-сервер или в контейнерный оркестратор, например, поддержку Docker в HDP 3.x