Azure Data Factory Copy Activity сбрасывает столбцы на полу - PullRequest
0 голосов
/ 16 апреля 2020

в первый раз, долгое время.

Я выполняю импорт файла csv, который содержит 734 столбца в Azure Операция копирования фабрики данных. Фабрика данных не читает последние 9 столбцов и заполняется значением NULL. Даже в предварительном просмотре я вижу, что столбцы не имеют значений, но схема для этих столбцов обнаружена. Существует ли ограничение на количество столбцов в копии до 725?

Ответы [ 2 ]

0 голосов
/ 22 апреля 2020

Вот что случилось. У меня был файл в zip-папках, и я решил сначала распаковать файлы, чтобы обработать их. Оказывается, что при разархивировании через ADF он удалял кавычки из моих столбцов, а затем в одном из столбцов был escape-символ. Этот экранирующий персонаж все перевернул, и я потерял девять столбцов.

Но я научился многим вещам, которые НЕ нужно делать, так что это не было пустой тратой времени. Спасибо за ответы!

0 голосов
/ 17 апреля 2020

Как сказал Джоэл, для 725 или около того столбцов ограничений нет. Я предлагаю

  1. Go на вкладку сопоставления и выбрать только 726-й столбец (если у вас есть заголовок, это будет легко, или ADF сгенерирует заголовок, такой как Prop_726 (наиболее вероятно), скопируйте данные в BLOB-объект как приемник, если у большого объекта есть поле, это означает, что у вас есть проблема с типом данных в таблице. фиктивные данные для 726-го столбца.
Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...