NiFi 1.5.0: генерировать результаты заказа

Question

Возможно ли получить набор данных из базы данных и заказать их? У меня очень большая таблица (72 миллиона строк), и мне нужно получить их параллельно (как это делает GenerateTableFetch), но упорядочить по столбцу, в моем случае "url"?

Answer 1

Если вы укажете столбец с максимальным значением, запросы будут упорядочены по этому столбцу (для инкрементной выборки). Вы можете попытаться добавить свое предложение ORDER BY в раздел «Дополнительное предложение WHERE».

Начиная с NiFi 1.7.0 (еще не выпущенного на момент написания этой статьи), вы можете указывать произвольные запросы в QueryDatabaseTable (через NIFI-1706 ), пожалуйста, не стесняйтесь писать соответствующий Jira для GenerateTableFetch , Я не уверен в логистике добавления его в GTF, но если он работает для QDT, я не понимаю, почему мы не можем добавить его в GTF.