Когда я пытаюсь запустить искровое задание в AWS Glue, появляется следующее сообщение об ошибке.
ImportError: cannot import name explode_outer
Если я запускаю тот же код в локальной настройке спарк, все работает нормально.
Вот так я импортирую explode_outer в коде.
from pyspark.sql.functions import explode_outer
Есть ли какие-либо ограничения в упаковке AWS Glue?