Загрузить несколько файлов с разделителями мультисхемы из одних и тех же каталогов

Question

Могу ли я узнать, есть ли у него какой-либо метод для загрузки нескольких файлов, которые являются файлами с несколькими схемами, которые хранятся в тех же каталогах в Talend?

Я пытался использовать компонент tFileInputMSDelimited раньше, но не смог связать его с tFilelist компонент для l oop через файлы в каталоге.

Кто-нибудь имеет идеи, как решить эту проблему?

Чтобы было понятнее, каждый файл содержит только одну строку пакета, но содержит несколько заголовков линия, и она поставляется с кучей транзакций. Как показано на примере данных ниже.

Answer 1

Компонент tFileOutputMSDelimited должен соответствовать вашим потребностям.

Вам понадобится несколько потоков, входящих в него. Вы можете либо сохранить файлы и прочитать их, либо использовать tHashInput / tHashOutput для непосредственного получения данных.

Затем вы перенаправляете все потоки в tFileOutputMSDelimited (пример с tFixedFlowInput, адаптируете свои потоки):

В нем вы можете настроить, какой поток является родительским потоком, содержащим ваш идентификатор. Затем вы можете добавить дочерние потоки и определить родителя и идентификатор для распознавания строк в родительском потоке: