Spark data frame to SQL Создание оператора таблицы в Redshift - PullRequest
1 голос
/ 01 апреля 2020

У меня есть мутация JSON (структура JSON все время меняется), которую я сплющил в несколько фреймов данных. Теперь мне нужно загрузить эти фреймы данных в мои промежуточные таблицы в Redshift. Поскольку структура JSON постоянно меняется, количество кадров данных и структура кадров данных постоянно меняются. Поэтому будет удобно, если я смогу извлечь схему каждого фрейма данных, построить операторы 'create table', запустить их в базе данных перед загрузкой фреймов данных в промежуточные таблицы. Как мне динамически преобразовать схему фрейма данных для создания табличных операторов.

Если кто-нибудь знает какой-либо другой простой способ сделать это, пожалуйста, дайте мне знать. Я использую Python.

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...