Talend MySQL поток останавливается на 11599 строках

Question

Я создал задание в Talend Open Studio для интеграции данных. Он работает и делает правильные вещи, но при запуске останавливается на 11599 строках. Единственная расширенная настройка, которую я использовал, - это Включить поток, чтобы упростить использование памяти.

Answer 1

Оказывается, что-то не так с строкой 11600 (поэтому она перешла на 11599, а затем остановилась). Но все еще пытаюсь понять, что.

Answer 2

Когда вы используете компонент Commit, он получает все записи из источника и фиксирует все вместе. 11599 записей фиксируются за один раз, что снижает производительность работы. Вместо этого избегайте использования компонента фиксации и используйте расширенные настройки в компоненте вывода и укажите интервал фиксации. Например: если вы задаете интервал фиксации 1000, он фиксирует каждую 1000 записей вместе в цели.