Как загрузить N записей через пакет ssis?

Question

Мне нужно загрузить данные за три дня с исходного сервера на целевой сервер через пакет служб SSIS.я посчитал, что общая запись за три дня составляет около 31000.

в исходной таблице я использую следующий запрос sql: -

выберите идентификатор, идентификатор клиента, удаленный_дат, дата_контакта_дата ,_дат_вс_данных ,_дек_пользователя_дата ,_данные_черкнутого_дата, измененный_дат, модифицированный_бд, cd_mdm1, cd_mdm2, с.д.и updated_date <= CURRENT_DATE-1); </p>

для отправки данных в таблицу назначения.

запрос правильный, его число составляет около 31000.но ошибка при использовании пакета - он не передает данные из источника в место назначения.Если я использую предел около 600, то есть ниже запрос работает нормально.выберите идентификатор, идентификатор клиента, удаленный_дат, lc_contact_date, lc_lead_date, lc_customer_date, is_blacklisted_date, измененный_датный, updated_by, cd_mdm1, cd_mdm2, cd_mdm3, cd_mdm4: 201_d0: d0_d_d_0_0_0: d0: d0: d0: d0: d0: d0: d0: d0: d0: d0CURRENT_DATE-1) лимит 600;

Кто-нибудь может мне помочь, какую настройку или какую-либо вещь я должен встроить в пакет ssis?

Answer 1

Я использовал SSIS для загрузки миллионов строк - в инструменте нет ограничения на число строк.

Лучше всего предположить, что что-то в компоненте преобразования данных не может быть преобразовано, и это вызывает ошибку пакета.

Для подтверждения * удалите существующее средство просмотра данных (необязательно) * Добавитьпроизводный столбец к пути ошибки из существующего компонента преобразования данных * Добавьте средство просмотра данных между преобразованием данных и производным столбцом.

Теперь все ошибочные строки будут направлены вашему зрителю.На этом этапе вы можете определить, почему строки не соответствуют указанному преобразованию, а затем очистить их при необходимости.