Подготовка данных облака Google - ошибка при импорте набора данных из BigQuery

Question

Когда я пытаюсь импортировать таблицы больших запросов как набор данных в моем потоке подготовки данных, у меня появляется следующая ошибка:

Не удалось создать набор данных: ошибка ввода-вывода.

Я попытался импортироватьмножество таблиц больших запросов (из одного набора данных BQ), все они успешно импортированы, кроме этой, которая имеет много столбцов (более 2700 столбцов!).Может быть, это из-за большого количества столбцов, но я не вижу такого ограничения в Документах!

, когда выбираю таблицу ----> У меня есть это сообщение «Предварительный просмотр недоступен», например:

и после нажатия кнопки «импорт»:

Кто-нибудь знает, почему это происходит, или есть предложения?

Answer 1

Документация Dataprep не имеет максимального ограничения по столбцам, поэтому не исключено, что это проблема.

С другой стороны, я видел общие сообщения, такие как «Ошибка ввода-вывода» или просто красные значкипри импорте данных, и они связаны с преобразованием типов данных между Dataprep и BigQuery .

Я думаю, что поиск типов в BQ, которые не совместимы в Dataprep, и преобразование в один совместимый должен решить вашу проблему.