Я пытаюсь запустить исполняемый скрипт для столбца в кадре данных.
В настоящее время Spark разрешает запуск только канала на RDD, что очень громоздко.В настоящее время я пытаюсь написать свой собственный модуль scala для этого, но я не нашел хорошего способа: запустить скрипт и запустить несколько записей в кадре данных.Это сделано для того, чтобы избежать затрат на запуск скрипта, который я пытаюсь применить.