Синхронизация данных между Hadoop и PostgreSql с использованием SymmetricDs - PullRequest
1 голос
/ 17 февраля 2010

Я использую Hadoop для хранения данных нашего приложения. Как я могу синхронизировать данные между PostgreSql и Hadoop? Я использую SymmetricDS в качестве инструмента репликации.

Ответы [ 2 ]

1 голос
/ 13 мая 2014

Если вы хотите продолжать использовать SymmetricDS, вы можете реализовать IDatabaseWriter. Вот пример написания в MongoDB. https://github.com/JumpMind/symmetric-mongo

1 голос
/ 18 июня 2010

Если hadoop копирует данные только из PostgreSQL, а на сайте hadoop обновления не производятся, попробуйте использовать sqoop - простую базу данных в инструменте импорта hadoop.

...