Я хотел бы использовать модель, которую я построил с помощью конвейера sklearn в pyspark. Конвейер заботится о вменении, масштабировании и однократном кодировании, а также о классификации случайных лесов. Я пробовал транслировать модель и использовать pandas udf для прогнозирования. Не сработало, получил py4jjavaerror.