Удаляемая таблица Hive не удаляет файлы в HDFS.Любые решения? - PullRequest
1 голос
/ 18 марта 2019

При удалении управляемых таблиц из куста связанные с ним файлы из hdf не удаляются (в кирпичах Azure-datab). Я получаю следующую ошибку:

[Simba] SparkJDBCDriver ОШИБКА обработки запроса / оператора. Код ошибки: 0, состояние SQL: org.apache.spark.sql.AnalysisException: Невозможно создать управляемую таблицу («схема» .XXXXX` '). Соответствующее местоположение ('dbfs: /user/hive/warehouse/schema.db/XXXXX) уже существует

Эта проблема возникает периодически. Ищите решение этой проблемы.

1 Ответ

1 голос
/ 24 апреля 2019

Я начал бить это. Это было хорошо в течение прошлого года, тогда что-то происходит с вложением хранилища, я думаю. Возможно, усовершенствования, происходящие на заднем плане, которые вызывают проблемы (PaaS!). В качестве меры предосторожности я вручную удаляю прямой путь и удаляю таблицу, пока не смогу получить приличное объяснение того, что происходит, или не получу ответ от службы поддержки.

Использование

dbutils.fs.rm("dbfs:/user/hive/warehouse/schema.db/XXXXX", true)

Будь осторожен с этим, хотя! Неправильный путь, и это может быть трагично!

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...