azure при создании новой записной книжки проблема чтения старых данных хранилища искр - PullRequest
0 голосов
/ 19 января 2020

Я новичок в azure. Базы данных, пожалуйста, помогите

Существующая структура папок в сервисе azure jupyter ml:

/ Naveen /

/ Naveen / Data

/ Naveen / spark-warehouse

Что я сделал:

Я инициализировал новый сеанс pyspark, прочитал все данные из папки Data и загружены в виде таблиц с использованием pyspark из jupter.

Как уже упоминалось выше, из моего сеанса pyspark был создан spark-хранилище, и данные были загружены

Проблема:

По какой-то причине я закрыл / сеанс моего ноутбука отключился.

В чем проблема?

Я создал новый сеанс ноутбука в jupyter и инициализировал сеанс pyspark. Но я не смог прочитать ранее созданную базу данных и таблицы, которые были созданы из предыдущего сеанса. Но физически я смог увидеть базу данных и таблицы

Это больно, мне приходится снова запускать весь процесс в другой схеме

Я действительно новичок azure, пожалуйста, помогите мне преодолеть препятствие или предложите какую-либо альтернативу. Что я должен сделать, чтобы прочитать старые записанные данные из сессии pyspark

...