Я начал бить это. Это было хорошо в течение прошлого года, тогда что-то происходит с вложением хранилища, я думаю. Возможно, усовершенствования, происходящие на заднем плане, которые вызывают проблемы (PaaS!). В качестве меры предосторожности я вручную удаляю прямой путь и удаляю таблицу, пока не смогу получить приличное объяснение того, что происходит, или не получу ответ от службы поддержки.
Использование
dbutils.fs.rm("dbfs:/user/hive/warehouse/schema.db/XXXXX", true)
Будь осторожен с этим, хотя! Неправильный путь, и это может быть трагично!