Импорт нескольких файлов CSV на SQL Server из папки с дополнительным именем файла в качестве дополнительного столбца - PullRequest
Новая
       34

Импорт нескольких файлов CSV на SQL Server из папки с дополнительным именем файла в качестве дополнительного столбца

0 голосов
/ 07 мая 2018

У меня есть папка с именем «Данные». Эта папка состоит из различных файлов .CSV с одинаковой схемой. Расположение папки 'C: \ Data ..'

Я хочу рекурсивно импортировать содержимое всех файлов в SQL Server в одной таблице.

Добавить в таблицу дополнительный столбец, который состоит из каждого файла.

Пробовал некоторые решения нашел его здесь , но это не сработало. 

--get the list of files to process:
    SET @path = 'C:\Data\'
    SET @cmd = 'dir ' + @path + '*.csv /b'
    INSERT INTO  ALLFILENAMES(WHICHFILE)
    EXEC Master..xp_cmdShell @cmd
    UPDATE ALLFILENAMES SET WHICHPATH = @path where WHICHPATH is null


    --cursor loop
    declare c1 cursor for SELECT WHICHPATH,WHICHFILE FROM ALLFILENAMES where WHICHFILE like '%.csv%'
    open c1
    fetch next from c1 into @path,@filename
    While @@fetch_status <> -1
      begin
      --bulk insert won't take a variable name, so make a sql and execute it instead:
       set @sql = 'BULK INSERT Temp FROM ''' + @path + @filename + ''' '
           + '     WITH ( 
                   FIELDTERMINATOR = '','', 
                   ROWTERMINATOR = ''\n'', 
                   FIRSTROW = 2 
                ) '
    print @sql
    exec (@sql)

      fetch next from c1 into @path,@filename
      end
    close c1
    deallocate c1

Две вещи, которые не работают должным образом:

1) Не работает для рекурсивных файлов в каталоге.

2) Невозможно выполнить массовую вставку в созданный временный файл.

...