Как шаг ввода таблицы PDI Kettle загружает данные? - PullRequest
0 голосов
/ 21 мая 2018

Я новичок в чайнике.Я хочу знать, загрузит ли шаг ввода таблицы все данные из таблицы в память сразу.Если да, как избежать переполнения памяти?

1 Ответ

0 голосов
/ 25 мая 2018

Если бы это работало так, как люди использовали бы это в сценарии с большими данными?:) Не волнуйся, все будет хорошо.PDI не переносит данные в локальную память, если этого можно избежать.То же самое для всех шагов ввода.Он создает курсор (как поток) и просто получает данные, с которыми вы работаете в данный момент, а затем освобождает их из памяти, когда достигает конца конвейера.

...