Почему задания sqoop не сохраняют последнее добавочное значение в metastore? - PullRequest
0 голосов
/ 08 мая 2019

Я параллельно выполняю 5 заданий sqoop для разных таблиц, которые извлекают данные из базы данных Oracle.

Но из 5 заданий некоторые задания не сохраняют последнее обновленное значение столбца в своем метастазе, поэтому для каждого выполнения он выбирает одни и те же данные.

Например, допустим, я установил последний столбецЗначение «2019-01-01 00:00:00» и выборка данных из «2019-01-01 00:00:00» в MAX_VALUE контрольного столбца в таблице, т.е. 2019-05-07 23:12:12,

Таким образом, он должен сохранить свое последнее значение '2019-05-07 23:12:12' в своем метастаре, но не сохраняет его.И ежедневно я получаю повторяющиеся данные из «2019-01-01».

Примечание. Когда я последовательно выполняю эти задания, все работает нормально.

Что-то мне не хватает?

Пожалуйста, помогите мне в этом.

...